şema · olgun
Code RAG'in dört zor tarafı
Vektör arama kolay kısmı: birebir semboller, İngilizce kod üzerinde Türkçe, bayatlama ve hayır diyebilmek.
Vektör arama, bir codebase RAG'inin kolay tarafı. Asıl zor olan dört şey bu sistemin her parçasını belirledi.
birebir sembollerhandleAuthCallback
Türkçe → İngilizcedüzyazı vs. kod
bayatlamarepo değişti
"hayır" demekkNN asla hayır demez
| Problem | Ne yaptık | Ölçüm |
|---|---|---|
| Semboller | sembol biçimli query'leri BM25'e yönlendir | 1.0 / 1.0 recall@8 / MRR |
| Türkçe sorular | çok dilli embedder, isteğe bağlı LLM açıklamaları | 0.04 → 0.684 → 1.0 (alt küme) |
| Bayatlama | push'ta sha256 manifest diff'i | 38 değişen dosya 23 sn'de |
| Cevap yok | üç skor bandı + negatif golden case'ler | abstain 0.846, yanlış alarm 0.048 |
Her satır, yanında bir sayı olan bir karar. Bu bahçenin geri kalanı o sayıların hikâyesi — fikrimizi değiştirenler dâhil.