What if instead of search queries being interpreted as a “bag of terms” we could see them as a “bag of decisions”?
Gelişmenin Ayrıntıları ve Kapsamı
Jev'in kalitenin öncüsü olarak görev yaptığını biliyoruz. Eğlenceli bir deney olarak başka bir teknik denemek istedim: Jev'e sadece "Bu {query} ile alakalı mı?" diye sormayın. Bunun yerine, Yüksek Lisans'ın sorgunun kriterlerini oluşturmasına izin verin: yalnızca bu sorgunun alaka düzeyini değerlendirecek bir değerlendirme listesi.
Bir LLM'yi "olumluluğun alakayı gösterdiği yerde evet / hayır sorusu oluştur" ile yönlendiririz. Çocuklara yönelik sorgu masası için şunları üretebilir:
“Teknoloji ekosisteminde ölçeklenebilirlik ve otomasyon süreçleri, kullanıcı deneyimi ile doğrudan birleştiğinde katma değer üretiyor.”
Each of these can be turned into a noul question. P(yes) of each can be summed to score overall relevance:
Bir sorgunun bir terim çantası olarak temsil edilmesi yerine, bir çanta dolusu sorumuz var. Jev 'evet' olasılığını verdiğinden, her sorunun doğru olma olasılığını yeniden sıralama puanı olarak basitçe toplayabiliriz:
Now total_probability can be our reranker’s final score. We can add that to BM25, or just take it directly. In other words:
I ran an experiment comparing BM25 vs two variants (gory details here):
Daha sonra iki e-ticaret veri seti Wayfair WANDS ve Amazon ESCI üzerinde değerlendirme yaptım. Nasıl adil oldu?
Bu işe yarıyor mu? Öyle görünüyor. İşte bazı ilk sonuçlar:
Esasen sorgu başına özellik oluşturma işlemi yapıyoruz. Bu sorgu için dikkate alınması gereken önemli noktalara ilham kaynağı olarak Yüksek Lisans'ı kullanın. Daha sonra bu kriterleri karşılayıp karşılamadığımızı ölçmek için Jev'i kullanın. Yukarıdaki sorulardan daha keskin + çeşitli sorular sağlamak için LLM çağrısını nasıl değiştirebileceğimizi merak edebiliriz (IMO'nun bazıları tekrarlıdır)
Recep Usta OS — Sistem & Mühendislik Değerlendirmesi
Altyapı ve Verimlilik Perspektifi: Bag of Decisions Reranker haberi incelendiğinde; kurumsal dijitalleşme ve otomasyon süreçlerinin modern yazılım mimarileriyle nasıl güçlendirildiği açıkça görülüyor. Ağ güvenliği, yüksek erişilebilirlik ve mikroservis tabanlı veri senkronizasyonu bu tarz operasyonlarda başarının anahtarıdır.
Kullanıcı odaklı dijital çözümlerin güvenli altyapılarla desteklenmesi, hem yerel pazarda hem de uluslararası genişlemede sistem sürdürülebilirliğini sağlamlaştırmaktadır.