LAB · DEMO
Referanslı Cevap Demosu
Cevabın her cümlesini getirilen belge parçasına bağlayan, dayanağı olmayan cümleyi silmek yerine işaretleyen bir arayüz taslağı. Kaynaklı cevap ifadesinin ekranda ne anlama geldiğini somut olarak görmek isteyenler için.
Durum
GeliştiriliyorBu projenin girdi tanımları, arayüz tasarımıyla birlikte yayımlanacak.
Referanslı Cevap Demosu henüz yayında değil
Bu proje geliştirme listesinde. Yayına girdiğinde bültenle duyurulacak; çalışan araçları Lab sayfasından görebilirsiniz.
Projenin içi
Kurulum, varsayımlar, ölçüm düzeni ve sınırlılıklar.
Kısa cevap
Atfın sonradan eklenen bir süs değil, cümlenin görünme koşulu olarak kurulduğu bir soru-cevap arayüzü taslağı.
Gösterdiği şey#
Demo tek bir soruyu ele alıyor: bir cevabın kaynaklı olduğunu söylemek, arayüzde neyi zorunlu kılar. Ekranda cevap solda, getirilen parçalar sağda durur; bir cümlenin üzerine gelindiğinde onu besleyen parça vurgulanır, parçaya gidildiğinde ona dayanan cümleler işaretlenir. Ürün önerisi değil, bir tasarım iddiasının somutlaştırılmasıdır: atıf paragraf sonuna toplanan numaralarla verilemez.
Arayüz kararları#
| Karar | Neden | Alternatifi neden değil |
|---|---|---|
| Atıf cümle düzeyinde verilir | Okur ancak bu düzeyde hangi iddianın hangi parçadan geldiğini ayırabilir. | Paragraf sonuna toplanan numaralar kısa metinde yeter, çok kaynaklı paragrafta iddiaları birbirine karıştırır. |
| Getirilen parçalar sürekli görünür | Bağlam gizlenirse okur, modelin bağlamda olmayan bir şeyi eklediğini sınayamaz. | Açılır panel ekranı rahatlatır ama doğrulamayı isteğe bağlı bir ek adıma çevirir. |
| Dayanaksız cümle silinmez, işaretlenir | İşaretlemek kararı okura bırakır; kaldırmak cevabı akıcı ama eksik gösterir. | Sessizce filtrelemek arayüzü olduğundan daha güvenilir gösterir. |
| Parça metni kısaltılmadan gösterilir | Denetlenecek şey parçanın kendisidir; özet, atfı doğrulanamaz hale getirir. | Özet göstermek yer kazandırır ama okurun karşılaştıracağı asıl metni saklar. |
| Çelişen parçalar yan yana durur | Bağlamdaki iki kayıt birbirini tutmuyorsa bu, cevapta değil arayüzde çözülecek bir durumdur. | Modelden birini seçmesini beklemek çelişkiyi görünmez kılar ve seçimin gerekçesi kaybolur. |
Kullanıcı akışı#
- 1Soruyu yaz
Arayüz, aramayı hangi belge kümesinde yapacağını soru kutusunun altında yazar; kapsam gizli bir varsayım olarak kalmaz.
- 2Getirilen parçaları gör
Cevap yazılmaya başlamadan önce parçalar listelenir. Okur, aramanın konuyla ilgisiz sonuç döndürdüğünü cevabı beklemeden görebilir.
- 3Cevabı cümle cümle izle
Her cümle bağlı olduğu parçanın işaretiyle birlikte belirir; bağı olmayan cümle kendi ayrı işaretini taşıyarak gelir.
- 4Bir cümleyi doğrula
Cümleye tıklandığında sağ panel ilgili parçanın tam metnine kaydırılır ve eşleşen bölüm vurgulanır.
- 5İtiraz et
Okur, cümlenin gösterilen parçayla desteklenmediğini bildirebilir. İtiraz cevabın yanında durur; arayüz onu ayrı bir yere taşıyıp gizlemez.
Belirsizlik nasıl gösteriliyor#
Belirsizlik tek bir gösterge yerine birkaç ayrı işaretle taşınır, çünkü modelin emin olmaması ile bağlamda cevabın bulunmaması farklı durumlardır ve okurun yapacağı iş de farklıdır. İşaretler metnin içinde, ilgili cümlenin kenarında durur; sayfa altında toplanan bir açıklama notu olarak değil.
- Dayanaksız cümle: kenarda kesikli çizgi ve cümlenin getirilen parçalarda karşılık bulmadığını söyleyen kısa ibare
- Zayıf dayanak: parça konuyla ilgili ama iddiayı tam karşılamıyorsa bağ işareti soluk gösterilir
- Çelişki: iki parça birbirine karşıysa cümlenin yanında ikisi birlikte açılır
- Kapsam dışı soru: arama hiçbir parça döndürmediyse cevap üretilmez, boş sonuç olduğu gibi söylenir
- Tarih notu: parçanın belge tarihi sorunun ilgilendiği dönemin dışındaysa bağ işaretinin yanında not durur
Sınırlılıklar#
Atıf bağı, cümlenin doğru olduğunu değil bir parçaya dayandığını gösterir; parçanın kendisi yanlış ya da güncelliğini yitirmiş olabilir. Cümle ile parça arasındaki eşleşme de kesin bir kanıt değil, arayüzün okura sunduğu bir iddiadır. Taslak elle seçilmiş küçük bir belge kümesiyle çalışır; erişim yetkisi, çok dilli koleksiyon ve büyük dizin davranışı hiç ele alınmamıştır.
Aracın arkasındaki kavramlar
Hesaplayıcı bir kararı hızlandırır; kararın nedenini kavram girdileri anlatır.
Lab'dan
- AraçÇalışıyorAI ROI HesaplayıcıSüre tasarrufu ve hata azaltma üzerinden yatırım geri dönüşü tahmini.
- AraçÇalışıyorAjan Adım MaliyetiBir ajan döngüsünün adım sayısı, biriken bağlamı ve kendi fiyatlarınızla toplam token faturasını hesaplar. Adım sınırının neden bir maliyet kararı olduğunu ve bağlam penceresinin kaçıncı adımda dolduğunu görünür kılar.
- DeneyYakındaAjan Bellek Mimarisi DeneyiÖzetleme, vektör belleği ve kayan pencere yaklaşımlarını aynı uzun ajan görevinde karşılaştıran ölçüm düzeni. Bellek mimarisi seçimini karara bağlamak isteyen ekipler için, bilgi kaybının hangi turda başladığını görünür kılacak denetim noktaları üzerine kurulur.
- Açık KaynakYakındaAjan İzleme KitiAjan döngüsünün her turunu — araç çağrısını, dönen yanıtı ve büyüyen bağlamı — tek bir iz kaydında toplayan kit. Başarısız bir koşunun hangi adımda saptığını sonradan yeniden oynatarak görebilmek için kurulur.
- DemoYakındaAjan Plan Görünümü DemosuAjanın planını adımlar yürümeden önce gösteren, her adımın gerekçesini ve plan değişikliklerini iz bırakacak biçimde tutan arayüz taslağı. Müdahale ve geri sarma noktalarının nereye konması gerektiğini tartışır.
- DeneyYakındaAkıl Yürütme Bütçesi DeneyiDüşünme bütçesi kademe kademe yükseltildiğinde doğruluk kazancının nerede düzleştiğini arayan ölçüm düzeni. Bütçeyi görev türüne göre ayarlamak isteyen ekipler, ek bütçenin karşılığı olup olmadığını kendi görev kümesinde görebilir.
BUILD
Hesap tuttu, sıra uygulamada
Aynı hesabı kendi verinizle yapıp mimariyi kurmak için kurumsal destek alabilirsiniz.