Radyoloji iş listesinde ön değerlendirme sıralaması

Bağlam ve kısıtlar#

İki yerleşkesi olan bir hastanede görüntüleme tetkikleri arşiv ve iletişim sistemine düşüyor, raporlama iş listesi ise bilgi sisteminden besleniyordu. Acil servisten gelen istek ile poliklinik kontrolü aynı kuyrukta buluşuyor, ayrımı yalnızca isteği yazan hekimin işaretlediği aciliyet alanı yapıyordu. Bu alan pratikte her zaman işaretli olduğu için sıralama fiilen geliş sırasıydı.

Kısıtın ilki mevzuattı: tanısal iddia taşıyan bir yazılım kullanım amacına göre tıbbi cihaz kapsamına girer, bu da uygunluk değerlendirmesi ve kayıt yükümlülüğü demektir. İkincisi güvendi: radyologlar daha önce gördükleri otomatik bulgu araçlarının yanlış işaretlerinden sonra bu tür çıktılara mesafeli yaklaşıyordu. Üçüncüsü altyapıydı — görüntüler yerleşke içinde kalmak zorundaydı, bu da işlemenin hastane ağında yapılmasını gerektirdi.

Veri ve erişim#

Geriye dönük çalışma için arşivden görüntü ve eşleşen rapor metni çıkarıldı; bu çıkarma etik kurul değerlendirmesine bağlandı ve veri kümesi kimliksizleştirilmiş olarak hastane içindeki ayrı bir çalışma ortamına alındı. Görüntü verisi özel nitelikli kişisel veri kapsamında ele alındı; ham veri hiçbir aşamada kurum dışına çıkmadı, model eğitimi de aynı ortamda yürütüldü. Erişim çalışma ekibiyle sınırlandı ve sorgu düzeyinde kayda alındı.

• Her incelemede birden çok seri var; hangi serinin değerlendirmeye gireceği protokol bazında sabitlendi, aksi halde yeniden yapılandırılmış seriler modele farklı veri gibi görünüyor.
• Piksel aralığı ve pencereleme cihaza göre değişiyor; normalizasyon cihaz bilgisinden bağımsız yapılamıyor.
• Arşivdeki eski incelemelerin bir kısmında meta veri eksik; eksik protokol bilgisi olan inceleme değerlendirme kümesine alınmadı.
• Rapor metinleri serbest yazım; aynı bulgu farklı hekimde farklı ifadeyle geçiyor ve olumsuzlama kalıpları tutarsız.
• Görüntü üzerine basılmış yazı ve cihaz damgası kimliksizleştirmede ayrı bir adım gerektiriyor; meta veri temizliği bunu kapsamıyor.

Mimari kararlar#

Bu vakanın bütün mimarisi tek bir çerçeveden çıktı: sistemin hata yapması kabul edilebilir olmalı. Bunu sağlamanın yolu modeli daha iyi yapmak değil, çıktının etkisini sınırlamaktı — sıralama önerisi, tanı değil; liste kısaltma yok, yalnızca yeniden dizme var.

Güvenlik ve yetki#

Model işaretleri hasta dosyasına yazılmıyor; yalnızca iş listesinin sıralama alanını etkileyen ayrı bir kayıtta duruyor ve rapor imzalandıktan sonra da orada kalıyor, çünkü geriye dönük ölçüm buna dayanıyor. İşaret kaydını görebilecek roller radyoloji ekibiyle sınırlı; isteği yazan klinik hekim işaret bilgisini görmüyor, aksi halde henüz okunmamış bir tetkik hakkında hüküm kurma riski doğuyor. Çalışma ortamı ile üretim ortamı ayrıldı ve eğitim verisine erişim, üretim erişiminden bağımsız yetkilendirildi.

Ölçüm düzeni#

• Duyarlılık ve kesinlik, geriye dönük kümede değil ileriye dönük toplanan ve radyologla doğrulanan kümede ölçülüyor.
• İşaret oranı vardiya, cihaz ve inceleme türü kırılımında izleniyor; oranın ani sapması model uyarısı olarak alarm üretiyor.
• İşaretlenen ve işaretlenmeyen tetkiklerin raporlanma gecikmesi ayrı izleniyor, çünkü kuyruk etkisi model doğruluğundan bağımsız bozulabiliyor.
• Radyologların işaretle uyuşmazlığı geri bildirim olarak kaydediliyor ve düzenli olarak yeniden etiketleme kuyruğuna giriyor.
• Kalibrasyon kayması, protokol değişikliği kayıtlarıyla birlikte okunuyor; teknik ekipteki bir ayar değişikliği ölçüm grafiğinde açıklanabilir olmalı.

Devreye alma ve işletme#

1. 1Sessiz mod

   Model üretim akışına bağlandı ama sıralamayı değiştirmedi; yalnızca işaretlerini kaydetti ve bu kayıtlar rapor sonuçlarıyla karşılaştırıldı.

2. 2Tek yerleşke, tek modalite

   Sıralama önce bir yerleşkenin tek inceleme türünde açıldı; cihaz farkı bu adımda görünür hale geldi.

3. 3Bütçe ve alarm ayarı

   İşaret bütçesi nöbet kapasitesine göre belirlendi, işaret oranına üst ve alt alarm konuldu; alarmda sıralama otomatik kapanıyor.

4. 4İkinci yerleşkeye taşıma

   Aynı model doğrudan açılmadı; ikinci yerleşkenin cihazları için sessiz mod tekrar edildi ve eşik yeniden kalibre edildi.

5. 5Dönemsel yeniden doğrulama

   Radyolog doğrulamalı değerlendirme kümesi dönemsel olarak yenileniyor; eski kümede ölçülen performans yeni protokolü temsil etmiyor.

Nerede yanıldık#

İlk model beklenenden iyi çıktı ve bu iyi haber değildi: incelemede modelin ayırt ettiği şeyin bulgu değil cihaz izi olduğu, cihaz kırılımında bakıldığında görüldü. Zayıf etiketleme de kendi hatasını taşıyordu; raporlarda çekingen ifadeler olumlu etiket sayıldığı için model belirsizliği bulgu gibi öğrenmişti. İşletmede en pahalı ders bir protokol değişikliğinden sonra yaşandı: işaret oranı fırladı, radyologlar kısa sürede sisteme güvenmeyi bıraktı ve güven modelden çok daha yavaş geri geldi — o günden sonra işaret oranı alarmı model metriklerinden önce bakılan gösterge oldu. Son olarak iş akışı tarafını hafife aldık; sıralamanın değişmesi, asistanların listeyi aralarında bölüşme düzenini bozdu ve bu, teknik bir sorun olmadığı için haftalarca dile getirilmedi.