şema · büyüyor

Small-to-big retrieval

Küçük şeyi embed et, büyük şeyi cevaba ver. Sentence window, parent/child, references.

Sezgi: büyük bir metin bloğunu embed etmek kötü fikir. Vektör bulanıklaşır ve sorunun sorduğu o tek cümle gürültüde boğulur.

Çözüm: küçük şeyi embed et, büyük şeyi cevaba ver.

üç varyant
Cümleyi embed et
Eşleştir
Pencereyi genişlet k=2
Geniş context LLM’e
Child chunk’ı embed et
Eşleştir
Parent chunk’ı getir
Parent’tan sentezle
Özeti/metadata’yı embed et
Eşleştir
Orijinali getir
Orijinalden sentezle

Ölçülmüş fark

Retrieverhit rateMRR
Base (düz chunk)0.7960.605
Chunk references0.8920.740
Metadata references0.9160.747

Kaynak: LlamaIndex advanced-retrieval benchmark’ları. Mutlak sayılar corpus’a göre değişir; sıralama genellikle korunur.

#retrieval #llamaindex

Bu notu beyaz tahtada gör →