TEMSİLÎ VAKA · SAĞLIK
Klinik kılavuzlarda kanıt düzeyi taşıyan arama
Hekimler güncel kılavuzu hastane ağındaki paylaşımlı klasörlerden ve kalite biriminin doküman sisteminden aramak zorundaydı; aynı kılavuzun birkaç sürümü yan yana durduğu için hangisinin yürürlükte olduğu dosya adına bakılarak tahmin ediliyordu. Öneri metni bulunduğunda o önerinin kanıt düzeyi çoğu belgede ayrı bir tabloda kaldığı için öneriyle birlikte okunamıyordu. Bir tedavi eşiğinin ne zaman ve neye dayanarak değiştiği kurumun kaydında değil, kıdemli hekimin hatırasında duruyordu. Poliklinikte iki hasta arasında dakikası sayılı olan hekim için bu, aramayı büsbütün bırakmak anlamına geliyordu.
Beklenen etki
- Kapsam
- Kurum protokolleri ile dış kurul kılavuzları tek indekste; her parça sürüm ve yürürlük etiketi taşıyor
- Ölçüm
- Geri getirme isabeti, cevabın alıntı doğruluğundan ayrı izleniyor
- İzlenebilirlik
- Her cevabın dayandığı kılavuz sürümü ve kanıt düzeyi sorgu kaydına geçiyor
- Sınır
- Yalnızca yürürlükten kalkmış belgeyle eşleşen sorular cevapsız bırakılıp gerekçesi gösteriliyor
Temsilî senaryo: buradaki satırlar ölçüm sonucu değil, bu kurulumda hangi büyüklüğün izlenmesi gerektiğini gösterir.
Bu kayıt gerçek bir müşteri işi değildir. Sinaptik Lab'in bu problemde izlediği yaklaşımı, mimari kararları ve ölçüm düzenini göstermek için yazılmış temsilî bir senaryodur: kurum adı taşımaz, içindeki hiçbir değer gerçek ölçüm değildir ve referans olarak gösterilemez. Gerçek projelerden vakalar müşteri onayı alındıkça bu kütüphaneye eklenir.
Problem
Hekimler güncel kılavuzu hastane ağındaki paylaşımlı klasörlerden ve kalite biriminin doküman sisteminden aramak zorundaydı; aynı kılavuzun birkaç sürümü yan yana durduğu için hangisinin yürürlükte olduğu dosya adına bakılarak tahmin ediliyordu. Öneri metni bulunduğunda o önerinin kanıt düzeyi çoğu belgede ayrı bir tabloda kaldığı için öneriyle birlikte okunamıyordu. Bir tedavi eşiğinin ne zaman ve neye dayanarak değiştiği kurumun kaydında değil, kıdemli hekimin hatırasında duruyordu. Poliklinikte iki hasta arasında dakikası sayılı olan hekim için bu, aramayı büsbütün bırakmak anlamına geliyordu.
Yaklaşım
Belgeler aranabilir hale getirilirken her parçaya kılavuzun künyesi yazıldı: yayımlayan kurul, sürüm, yürürlük durumu ve belge içindeki konum. Parçalama sayfa uzunluğuna göre değil öneri sınırına göre yapıldı, böylece öneri cümlesiyle kanıt düzeyi etiketi aynı parçada kaldı; doz tabloları hiç bölünmedi. Arama tek kanala bırakılmadı, çünkü kısaltma ve etken madde eşleşmesinde sözcük temelli kanal, yakın anlamlı soruda vektör kanalı kazanıyor; iki liste birleştirilip alan diline uyarlanmış bir yeniden sıralayıcıdan geçirildi. Üretim tarafı kasıtlı olarak kısıtlı bırakıldı: sistem alıntı, künye ve kanıt düzeyi döndürüyor, hastaya özel öneri cümlesi kurmuyor — bu sınır ürünü klinik karar destek iddiası tarafına geçirmemek için konuldu. Yürürlükten kalkmış sürümler silinmedi, açıkça geçersiz işaretiyle indekste tutuldu.
Kullanılan teknolojiler
- Hibrit arama
- Öneri sınırında parçalama
- Sürüm ve yürürlük meta verisi
- Alana uyarlanmış yeniden sıralama
- Düzen farkında belge ayrıştırma
- Alıntı zorunluluğu ve kapsam dışı reddi
Bağlam, kurulum ve ölçüm
Problem ve yaklaşım özetin üstünde; burada kararların gerekçesi ve mimarinin ayrıntısı var.
Bağlam ve kısıtlar#
Birkaç hastanesi olan bir özel sağlık grubunda klinik yönlendirme dört ayrı kaynaktan geliyordu: uluslararası uzmanlık kurullarının kılavuzları, Bakanlık algoritmaları, hastanenin kendi yazdığı kurum protokolleri ve geri ödeme kısıtlarını anlatan iç notlar. Bu dördü birbirini bazen tamamlıyor bazen çeliştiriyordu; çelişkiyi çözen kural hiçbir yerde yazılı değildi. Kalite birimi belgeleri düzenli topluyordu ama toplamak aramayı kolaylaştırmıyordu.
İşin en sert kısıtı hız değil, yanlış sürümün maliyetiydi. Cevapsız kalan bir soru hekimi eski alışkanlığına gönderir; eski sürümden alınmış kendinden emin bir cevap ise yanlış eşiği güncel gibi gösterir. Bu yüzden ürünün hedefi 'her soruya cevap veren asistan' değil, 'hangi belgenin hangi sürümünde ne yazdığını bulan ve bulamadığında bunu söyleyen arama' olarak tanımlandı.
Veri ve erişim#
Kaynak belgelerin bir kısmı doküman yönetim sistemindeydi, bir kısmı bölüm sekreterinin klasöründe duruyordu. Doküman sisteminde sürüm alanı vardı ama çoğu kayıtta boştu; gerçek sürüm bilgisi belgenin kapak sayfasında yazılıydı. İçerik hasta verisi olmadığı için erişim tarafında kişisel veri kısıtı yoktu, ancak lisanslı kılavuzların kurum dışına çıkmaması gereği ve telif sınırı indeksin nerede duracağını belirledi: indeks de üretim de hastane ağı içinde kaldı.
- Taranmış PDF'lerde metin katmanı yok; sayfa düzenini koruyan bir tanıma adımı olmadan tablo satırları karışıyor.
- Kurum protokolleri düzenlenebilir belge olarak tutuluyor ve yürürlük tarihi üst bilgide, gövdede değil.
- Kılavuz eklerinin önemli kısmı tablo; öneri metniyle kanıt düzeyi arasındaki bağ tabloda kuruluyor.
- Aynı kılavuzun yerelleştirilmiş özeti ile özgün metni ayrı belge; ikisi çelişince özgün metin üstün sayılıyor.
- Sorgu kayıtlarında serbest metin saklanıyor, bu yüzden kayıtlar hasta verisi gibi korunuyor ve süreli siliniyor.
Mimari kararlar#
Kararların çoğu 'daha iyi arama' değil 'yanlış cevabı imkânsıza yakın kılma' ekseninde alındı. Bu, geri getirme aşamasında cömert, cevap aşamasında cimri olmak anlamına geldi: aday havuzu geniş tutuldu, ama havuzda yürürlükte bir belge yoksa cevap üretilmedi.
| Karar | Seçilen yol | Neden |
|---|---|---|
| Parçalama birimi | Öneri ve tablo sınırı | Kanıt düzeyi etiketi öneri cümlesinden ayrılınca ikisi bir daha birleşmiyor |
| Arama kanalı | Sözcük ve vektör kanalının birleşimi | Kısaltma ve ilaç adı eşleşmesi sözcük kanalında, yakın anlamlı soru vektör kanalında kazanıyor |
| Sürüm yönetimi | Eski sürüm indekste, geçersiz etiketiyle | Silmek tarihçeyi yok ediyor; etiketlemek hem uyarıyı hem kaydı koruyor |
| Cevap kapsamı | Alıntı ve künye, hastaya özel öneri yok | Hastaya özel öneri üretmek ürünü klinik karar destek iddiasına ve onun yükümlülüklerine taşır |
| Yetersiz kanıt | Cevapsızlık ve gerekçe gösterme | Zayıf eşleşmeden cevap üretmek hekimin doğrulama isteğini köreltiyor |
Güvenlik ve yetki#
Yetkilendirme iki eksende kuruldu: belge lisansına göre görünürlük ve kullanıcı rolüne göre kapsam. Kurum protokollerinin bir kısmı yalnızca ilgili bölüm hekimlerine açık; hemşirelik bakım talimatları ayrı bir kümede. Sorgu kayıtları ise hasta verisi varsayımıyla ele alındı — kullanıcı adıyla eşleştirilmiş serbest metin sorgusu, süreli saklanan ve erişimi denetlenen bir kayıt olarak tutuluyor, model sağlayıcısına ya da kurum dışına gönderilmiyor.
Ölçüm düzeni#
- Geri getirme ile cevap kalitesi ayrı ölçülüyor: doğru belge listeye girmediyse cevabın güzelliği bilgi taşımıyor.
- Sürüm isabeti kendi başına bir ölçüt; cevabın yürürlükteki sürüme dayanıp dayanmadığı her denetim örnekleminde işaretleniyor.
- Kanıt düzeyi etiketinin belgedeki karşılığıyla uyumu hekim panelinde elle doğrulanıyor.
- Cevapsızlık oranı hata değil gösterge sayılıyor; birden fazla gün üst üste düşmesi indekste eksik belge sinyali olarak okunuyor.
- Soru kümesi donmuş değil: klinikten gelen gerçek sorular anonimleştirilip değerlendirme kümesine ekleniyor.
Devreye alma ve işletme#
- 1Belge künyesinin insan eliyle tamamlanması
Kalite birimi her belgenin sürüm ve yürürlük alanını doldurmadan belge indekse alınmadı; eksik künye teknik bir boşluk değil, yayın engeli sayıldı.
- 2Tek bölümde kapalı kullanım
Sistem önce tek bir klinik bölümde açıldı; sorular ve şikâyetler doğrudan indeks boşluklarına dönüştürüldü.
- 3Panel denetimi ve eşik ayarı
Cevapsızlık eşiği hekim panelinin denetim sonuçlarına göre ayarlandı; eşik bir kere ayarlanıp bırakılmadı, belge kümesi büyüdükçe yeniden bakıldı.
- 4Kılavuz güncelleme takibi
Yeni sürüm geldiğinde eski sürümün geçersiz işaretlenmesi ve yeni sürümün indekslenmesi tek işlem olarak yürütülüyor; biri yapılıp diğeri atlanamıyor.
Nerede yanıldık#
İlk sürümde parçalar sabit uzunlukta kesildi ve bu, doz tablolarını ortadan bölerek kullanılamaz parçalar üretti; sorun arama tarafında değil ayrıştırmada olduğu için haftalarca sıralama ayarıyla uğraşıldı. İkinci hata genel Türkçe için eğitilmiş bir yeniden sıralayıcıya güvenmek oldu: model tıbbi kısaltmaları gündelik kelime gibi ele alıp doğru belgeyi aşağı itti. Üçüncüsü ürün kararıydı — yürürlükten kalkmış kılavuzlar başta indeksten tümüyle çıkarıldı, sonra kurum içi tartışmalarda 'eskiden ne diyordu' sorusunun cevapsız kaldığı görüldü ve karar geri alındı. Sorgu kayıtlarının kişisel veri taşıdığı ise ilk aylarda fark edilmedi; içeriğin kamuya açık kılavuz olması, kayıtların da öyle olduğu izlenimini yaratmıştı.
Bir sonraki projede ne değişir?
Bir vakanın en değerli bölümü sonuç değil, tekrar edilebilir dersidir.
- 01
Sürüm bilgisi parça meta verisine yazılmadığında sistem eski talimatı güncel sanıyor; dosya adındaki tarihe güvenmek bunun en yaygın sebebi.
- 02
Doz tablosu sayfa ortasından bölündüğünde geriye anlamsız bir satır dizisi kalıyor; tabloyu tek parça tutmak, parça boyunu eşitlemekten önce gelir.
- 03
Türkçe tıp metninde kısaltma ve etken madde ile ticari ad eşleşmesi yalnızca vektör aramasıyla tutmuyor; sözcük kanalı kapatıldığında kayıp anında görünür hale geldi.
- 04
Geçersiz sürümü indeksten silmek bilgi kaybı: 'geçen yıl neden böyle yapıyorduk' sorusu da bir arama sorusudur ve cevabı yalnızca eski belgede.
- 05
İçeriğin kişisel veri olmaması sorgu kayıtlarının da olmadığı anlamına gelmiyor; hekim arama kutusuna hasta bilgisini yazıyor.
Vaka kütüphanesinden
- EğitimDers materyali üretiminde telif ve kaynak zinciriBir eğitim içeriği ekibinin slayt, çalışma kâğıdı ve ders notu arşivi yıllar içinde karışık kaynaklardan büyümüştü: internetten alınmış görseller, yabancı kitaplardan çevrilmiş paragraflar, farklı lisanslarla dolaşan açık ders materyalleri. Bir hak sahibi itiraz ettiğinde hangi paragrafın nereden geldiğini kimse söyleyemiyor; arama dosya adına ve ekip hafızasına kalıyordu. Model destekli üretim devreye girdikten sonra bu belirsizlik büyüdü, çünkü üretilen metnin dayandığı kaynak hiçbir yerde yazılı olmuyordu. Ekipte yaygın olan eğitim amaçlı kullanım serbesttir varsayımı da hiç denetlenmemiş bir varsayımdı.
- EğitimÖdeve biçimlendirici geri bildirim üretimiBir özel okul grubunda dil ve sosyal bilimler öğretmenleri her hafta çok sayıda yazılı ödev okuyordu; not zamanında giriliyordu ama öğrenciye dönen şey bir puan ile kısa bir genel yorumdu. Hangi öğrencinin hangi rubrik ölçütünde tekrar tekrar zorlandığı hiçbir yerde toplu olarak durmuyordu; öğretmen bunu kendi defterindeki izlenimden hatırlıyordu. Geri bildirim yazma işi mesai dışına taştığı için dönem başındaki ödevlerde ayrıntılı, dönem sonuna doğru tek cümleye inen bir kalite farkı oluşuyordu. Velinin gördüğü tabloda puan vardı, gerekçe yoktu.
- EğitimÖğrenci risk modelinde etik sınırlarBir yükseköğretim kurumunda akademik danışmanlar, dersi bırakma ya da kayıt yenilememe riski taşıyan öğrencilere ulaşmayı sezgiyle yapıyordu: yokluğu fark edilen öğrenciye yazılıyor, fark edilmeyen kimseye görünmüyordu. Devam bilgisi, ödev teslimleri ve öğrenme yönetim sistemi hareketleri ayrı sistemlerde durduğu için kimse bunları tek bir öğrenci için yan yana koymuyordu. Danışmanın haftada yapabileceği görüşme sayısı sınırlıydı ama bu sınırın kime harcandığı hiçbir kayıtta yoktu. Risk modeli gündeme geldiğinde ilk itiraz teknik değildi: skor öğrenciye yapışan bir etikete dönerse ne olacağı soruldu.
BUILD
Aynı yaklaşımı kurumunuzda kurmak ister misiniz?
Discovery oturumunda mevcut durumunuzu, veri erişiminizi ve başarı tanımınızı birlikte yazıyoruz.
