TEMSİLÎ VAKA · FİNANS
Araştırma notlarından müşteri özeti üretimi ve uyum kontrolü
Araştırma birimi hazırladığı uzun notları müşteri iletişimine uygun kısa metinlere elle dönüştürüyor, her metin uyum biriminin onayından geçiyordu. Onay sırası uzadıkça metinler güncelliğini yitiriyor, bazı taslaklar yayımlanmadan eskiyordu. Daha kritik olanı, hangi ifadenin genel nitelikli bir değerlendirme sayıldığı hangisinin kişiye özel tavsiyeye kaydığı yazılı bir ölçüte değil uyum uzmanının o günkü okumasına bağlıydı; itiraz geldiğinde kararın gerekçesi baştan kurulmak zorunda kalıyordu.
Beklenen etki
- Kapsam
- Kaynak olarak yalnız kurum içi araştırma notları tanımlı; dış kaynak ve web erişimi üretim hattına kapalı
- İzlenebilirlik
- Yayımlanan her cümle dayandığı not paragrafına geri götürülebiliyor
- Ölçüm
- Uyum uzmanının kabul, düzenleme ve reddetme kararları ifade sınıfı kırılımında izleniyor
- Karar sınırı
- Müşteri portföyüne göre kişiselleştirme kapsam dışında bırakıldı
Temsilî senaryo: buradaki satırlar ölçüm sonucu değil, bu kurulumda hangi büyüklüğün izlenmesi gerektiğini gösterir.
Bu kayıt gerçek bir müşteri işi değildir. Sinaptik Lab'in bu problemde izlediği yaklaşımı, mimari kararları ve ölçüm düzenini göstermek için yazılmış temsilî bir senaryodur: kurum adı taşımaz, içindeki hiçbir değer gerçek ölçüm değildir ve referans olarak gösterilemez. Gerçek projelerden vakalar müşteri onayı alındıkça bu kütüphaneye eklenir.
Problem
Araştırma birimi hazırladığı uzun notları müşteri iletişimine uygun kısa metinlere elle dönüştürüyor, her metin uyum biriminin onayından geçiyordu. Onay sırası uzadıkça metinler güncelliğini yitiriyor, bazı taslaklar yayımlanmadan eskiyordu. Daha kritik olanı, hangi ifadenin genel nitelikli bir değerlendirme sayıldığı hangisinin kişiye özel tavsiyeye kaydığı yazılı bir ölçüte değil uyum uzmanının o günkü okumasına bağlıydı; itiraz geldiğinde kararın gerekçesi baştan kurulmak zorunda kalıyordu.
Yaklaşım
Üretim ve denetim bilinçli olarak ayrıldı: bir katman araştırma notundan özet çıkarıyor, ondan bağımsız ikinci bir katman çıkan metni ifade sınıflarına göre işaretliyor. Üretim katmanının kaynak kümesi kurumun kendi araştırma notlarıyla sınırlandı ve dış erişim kapatıldı; böylece notta bulunmayan bir dayanağın metinde görünmesi tartışmasız bir hata olarak tanımlanabildi. Çıktı cümle düzeyinde kaynak paragraf kimliğine bağlı tutuluyor, uyum uzmanı işaretlenen ifadeden tek adımda kaynağa gidebiliyor. Zorunlu uyarı ve çıkar çatışması metinleri modele bırakılmadı, şablondan basılıyor; yayın kararı her durumda insan onayıyla veriliyor.
Kullanılan teknolojiler
- Ayrık üretim ve denetim katmanı
- Cümle düzeyinde kaynak bağı
- İfade sınıfı işaretleyici
- Sürüm etiketli yasaklı ifade sözlüğü
- Şablonla zorunlu uyarı basma
- İnsan onay kapısı
Bağlam, kurulum ve ölçüm
Problem ve yaklaşım özetin üstünde; burada kararların gerekçesi ve mimarinin ayrıntısı var.
Bağlam ve kısıtlar#
Araştırma notu ile müşteriye giden metin aynı şey değildir. Not, varsayımlarını ve koşullarını açıkça yazan uzun bir belgedir; müşteri iletişimi ise kısa, tek okumada anlaşılır ve hukuken sınırları belli bir metin olmak zorundadır. Bu iki biçim arasındaki dönüşüm, bir özetleme işi gibi görünse de esas olarak bir sınır koruma işidir.
Kısıt bu yüzden baştan netti: sistem metin üretebilir ama yayın kararını veremez. Ayrıca kişiselleştirme kapsam dışında tutuldu; müşterinin portföyüne göre şekillenen bir metin, biçimi ne olursa olsun farklı bir faaliyet alanına giriyor. Ekip bu sınırı ürün kapsamı olarak yazdı, çalışma zamanında filtrelenen bir özellik olarak bırakmadı.
Veri ve erişim#
Kaynak, araştırma biriminin yayımlanmış not arşivi ve o notların paragraf düzeyinde kimliklendirilmiş hâliydi. Notlar ambargo bilgisi taşıyor: bazı içerik belirli bir saate kadar yalnız iç kullanıma açık. Erişim tasarımı bu nedenle içerik kalitesinden önce zaman ve rol boyutunda kuruldu.
- Kimliklendirilmiş not paragrafları ve her paragrafın yazar ile tarih bilgisi
- Ambargo durumu ve iç kullanım işareti; ambargolu paragraf dış metin üretimine girmiyor
- Uyum biriminin sürüm etiketli yasaklı ifade sözlüğü ve ifade sınıfı tanımları
- Zorunlu uyarı, çıkar çatışması ve kapsam metinlerinin şablon deposu
- Onay kayıtları: hangi metnin hangi sürümü kim tarafından hangi gerekçeyle onaylandı
Mimari kararlar#
Mimarinin merkezindeki karar, üretimle denetimi ayırmaktı. Aynı modele hem yaz hem kendi yazdığını denetle demek, işaretleme oranını düşürüyor ve denetimi biçimsel hâle getiriyor. Denetim katmanı bu yüzden metni kim yazdığını bilmeden, yalnız metin ve kaynak paragraflar üzerinde çalışıyor.
| Karar | Seçilen yol | Neden |
|---|---|---|
| Üretim ile denetimin ilişkisi | Ayrı katman, ayrı bağlam | Kendi çıktısını denetleyen model kendi hatasını hata olarak görmüyor; işaretleme oranı düşüyor |
| Kaynak kümesi | Yalnız kurum içi araştırma notu | Dış kaynak açık olduğunda notta bulunmayan bir dayanağın nereden geldiği tartışmaya açılıyor |
| Çıktı biçimi | Cümle başına kaynak paragraf bağı | Uyum uzmanı işaretlenen ifadeden tek adımda kaynağa gidebilmeli; yoksa inceleme yeniden yazmaya dönüyor |
| Yasaklı ifade yönetimi | Sözcük sözlüğü ile sınıflandırıcı birlikte | Sözlük doğrudan ifadeleri yakalıyor, sınıflandırıcı dolaylı tavsiye dilini; ikisi birbirinin yerine geçmiyor |
| Çekince ve koşul | Kaynakta koşul varsa özette de zorunlu | Koşulun düşmesi iddiayı kesinleştiriyor ve metnin anlamını değiştiriyor |
| Zorunlu metinler | Şablondan basma | Modele bırakıldığında her seferinde biraz farklı çıkıyor; bu metinlerin sürümü denetlenebilir olmalı |
| Kişiselleştirme | Kapsam dışı | Portföye göre şekillenen metin farklı bir faaliyet alanına giriyor; bu sınır ürün kapsamında tutuldu |
Güvenlik ve yetki#
Ambargo yönetimi teknik bir erişim sorunu olarak ele alındı: ambargolu paragraf, dış iletişim için çalışan üretim hattının aday kümesine hiç girmiyor. Onay akışında kayıt metnin sürümüyle birlikte tutuluyor; onaylanan metin ile yayımlanan metin arasında fark oluşamayacak şekilde yayın, onaylanmış sürüm kimliğine bağlandı. Model çağrılarının günlüklerinde ambargolu içerik saklanmıyor, çünkü günlük deposunun erişim sınırı not arşivinden farklı.
Ölçüm düzeni#
- Kaynak bağlılığı: metindeki her iddianın gösterilen paragrafta karşılığı var mı, örneklem üzerinde elle denetleniyor
- İşaretleme uyumu: denetim katmanının işaretlediği ifadeler ile uzmanın gerçekten düzelttiği ifadeler karşılaştırılıyor
- Çekince koruma: kaynakta koşullu olan iddiaların özette koşullu kalıp kalmadığı ayrı kontrol
- Uzman kararı dağılımı: kabul, düzenle ve reddet kararları ifade sınıfı kırılımında izleniyor
- Şablon bütünlüğü: zorunlu uyarı metinlerinin sürümü ve yayımlanan metinle eşleşmesi her yayımda kontrol ediliyor
- Kaçan işaret paneli: uzmanın düzelttiği ama denetim katmanının işaretlemediği ifadeler ayrı toplanıyor ve sınıf tanımlarına geri besleniyor
Devreye alma ve işletme#
- 1İç taslak
Üretim yalnız araştırma biriminin kendi taslak aracı olarak açıldı; çıktı kurum dışına gitmiyor, uyum ekibi ise işaretleyiciyi aynı metinler üzerinde ayrı ayarlıyor.
- 2Gölge denetim
Uzmanların elle hazırladığı metinler de denetim katmanından geçiriliyor; böylece işaretleyicinin insan metninde de aynı sınıfları bulup bulmadığı görülüyor.
- 3Sınırlı yayın
Tek bir içerik türünde, her metin insan onayıyla yayımlanıyor; onay sırasında yapılan düzeltmeler ifade sınıfı etiketiyle kaydediliyor.
- 4Sözlük ve sınıf bakımı
Yasaklı ifade sözlüğü ve sınıf tanımları uyum biriminde, sürüm etiketiyle yönetiliyor; her değişiklik geçmiş metinler üzerinde yeniden koşulup etkisi ölçülüyor.
Nerede yanıldık#
İlk denetim katmanı sözlük tabanlıydı ve doğrudan eylem fiillerini iyi yakalıyordu. Ama model zaten o fiilleri kullanmıyordu; onun yerine cazip seviyeler, sabırlı yatırımcı için uygun görünüm gibi kalıplar üretiyordu ve bunlar okuyucuyu aynı yere götürdüğü hâlde sözlükten sızıyordu. İkinci ve daha sinsi hata çekincelerdeydi: kaynak notta belirli bir koşula bağlanmış bir beklenti, özette koşulu düşmüş bir öngörü olarak çıkıyordu. Metin akıcı, kısa ve okunabilir olduğu için ilk okumada kimse eksiği görmüyordu; koşul korumayı ayrı bir kontrol kuralına çevirmek, bütün sözlük genişletme çalışmasından daha fazla fark yarattı.
Bir sonraki projede ne değişir?
Bir vakanın en değerli bölümü sonuç değil, tekrar edilebilir dersidir.
- 01
Yasaklı kelime listesi dolaylı tavsiye dilini yakalamıyor; doğrudan bir eylem fiili kullanmayan ama okuyucuyu aynı yere götüren ifadeler için sınıflandırıcıya ihtiyaç var.
- 02
Özetleme koşul ve çekince cümlelerini düşürme eğiliminde; finansal metinde bir koşulun kaybı iddiayı kesinleştirdiği için anlam değişikliği oluyor ve bu ayrı bir denetim kuralı gerektiriyor.
- 03
Aynı modeli hem üretici hem denetçi rolünde kullanmak işaretleme oranını belirgin biçimde düşürüyor; denetim katmanı ayrı istem ve ayrı bağlamla çalışmak zorunda.
- 04
Zorunlu uyarı ve çıkar çatışması metinleri modele bırakıldığında her seferinde biraz farklı çıkıyor; bu metinler şablondan basılmalı ve sürümü metinle birlikte saklanmalı.
- 05
Cümle düzeyinde kaynak bağı kurulmadığında uyum incelemesi metni doğrulamaktan çıkıp baştan yazmaya dönüyor; onay süresi kazanılacakken kaybediliyor.
Vaka kütüphanesinden
- EğitimDers materyali üretiminde telif ve kaynak zinciriBir eğitim içeriği ekibinin slayt, çalışma kâğıdı ve ders notu arşivi yıllar içinde karışık kaynaklardan büyümüştü: internetten alınmış görseller, yabancı kitaplardan çevrilmiş paragraflar, farklı lisanslarla dolaşan açık ders materyalleri. Bir hak sahibi itiraz ettiğinde hangi paragrafın nereden geldiğini kimse söyleyemiyor; arama dosya adına ve ekip hafızasına kalıyordu. Model destekli üretim devreye girdikten sonra bu belirsizlik büyüdü, çünkü üretilen metnin dayandığı kaynak hiçbir yerde yazılı olmuyordu. Ekipte yaygın olan eğitim amaçlı kullanım serbesttir varsayımı da hiç denetlenmemiş bir varsayımdı.
- EğitimÖdeve biçimlendirici geri bildirim üretimiBir özel okul grubunda dil ve sosyal bilimler öğretmenleri her hafta çok sayıda yazılı ödev okuyordu; not zamanında giriliyordu ama öğrenciye dönen şey bir puan ile kısa bir genel yorumdu. Hangi öğrencinin hangi rubrik ölçütünde tekrar tekrar zorlandığı hiçbir yerde toplu olarak durmuyordu; öğretmen bunu kendi defterindeki izlenimden hatırlıyordu. Geri bildirim yazma işi mesai dışına taştığı için dönem başındaki ödevlerde ayrıntılı, dönem sonuna doğru tek cümleye inen bir kalite farkı oluşuyordu. Velinin gördüğü tabloda puan vardı, gerekçe yoktu.
- EğitimÖğrenci risk modelinde etik sınırlarBir yükseköğretim kurumunda akademik danışmanlar, dersi bırakma ya da kayıt yenilememe riski taşıyan öğrencilere ulaşmayı sezgiyle yapıyordu: yokluğu fark edilen öğrenciye yazılıyor, fark edilmeyen kimseye görünmüyordu. Devam bilgisi, ödev teslimleri ve öğrenme yönetim sistemi hareketleri ayrı sistemlerde durduğu için kimse bunları tek bir öğrenci için yan yana koymuyordu. Danışmanın haftada yapabileceği görüşme sayısı sınırlıydı ama bu sınırın kime harcandığı hiçbir kayıtta yoktu. Risk modeli gündeme geldiğinde ilk itiraz teknik değildi: skor öğrenciye yapışan bir etikete dönerse ne olacağı soruldu.
BUILD
Aynı yaklaşımı kurumunuzda kurmak ister misiniz?
Discovery oturumunda mevcut durumunuzu, veri erişiminizi ve başarı tanımınızı birlikte yazıyoruz.
