Bilgi Tabanları ve RAG

Genel Bakış

Bir bilgi tabanı, yapay zekaya kendi belgelerinizi vererek yanıtlarını temellendirmesini sağlar. ToRun belgeleri içe alır, onları parçalara böler, indeksler ve sorgu sırasında en alakalı parçaları vektör (anlamsal) ve sözcüksel (anahtar kelime) aramanın bir karması kullanarak getirir — bu, Retrieval-Augmented Generation (RAG) yöntemidir.

Nasıl yapılandırılmış

• Bilgi tabanı — bir projenin dosyalarının dizini; size aittir.
• Bilgi belgesi — bir tabana eklediğiniz her dosya veya kaynak.
• Bilgi parçası — bir belgenin bölündüğü indekslenmiş parçalar; getirme, parça düzeyinde gerçekleşir.

Bilgi tabanları kullanıcı kapsamlıdır — tabanınız ve içeriği size aittir.

Bir taban oluşturma ve doldurma

1. Bir proje açın ya da oluşturun — ona eklediğiniz dosyalar o projenin bilgi tabanını oluşturur.
2. Belgeler ekleyin. ToRun her belgeyi içe alır, parçalara böler ve anlamsal arama için gömüler (embedding) oluşturur.
3. İndekslendikten sonra, taban yanıtları temellendirmek için kullanılabilir hale gelir.

Getirme nasıl çalışır

Bir tabana karşı bir soru sorduğunuzda, ToRun şunları çalıştırır:

1. Vektör araması — sorgunuzu gömüler ve anlamsal olarak benzer parçaları bulur.
2. Sözcüksel arama — anahtar kelimeleri doğrudan eşleştirir ve vektör aramasının kaçırabileceği tam terimleri yakalar.
3. Birleştirilen en iyi sonuçlar modele temellendirme bağlamı olarak iletilir ve yanıt bunlardan üretilir.

Bu karma yaklaşım hem "aynı anlama gelir" hem de "tam olarak bu terimi içerir" eşleşmelerini yakalar.

Maliyet

İçe alma sırasında belgeleri gömmek ve temellendirilmiş soruları yanıtlamak yapay zeka çağrılarıdır, bu nedenle her biri bir fiyatlandırma anlık görüntüsü içeren bir BillingRecord üretir. İçe alma maliyeti kabaca belge hacmiyle orantılıdır; sorgu maliyeti ise soru başınadır.

İpuçları

• Temiz, iyi yapılandırılmış belgeler ekleyin — bozuk metin kötü indekslenir ve kötü getirilir.
• Bir tabanı tek bir konu veya projeye odaklı tutun; tek bir devasa karışık taban daha gürültülü sonuçlar getirir.
• Altta yatan materyal değiştiğinde belgeleri yeniden ekleyin veya yenileyin — getirme yalnızca indekslenmiş olanı bilir.