Randevuya gelmeme tahmini ve adillik denetimi

Bağlam ve kısıtlar#

Bir hastane grubunda randevular merkezi bir sistemden ve kurumun kendi kanallarından açılıyordu; kapasite planı ise klinik bazında ve elle yapılıyordu. Gelmeyen randevu iki maliyet üretiyordu: boş kalan hekim zamanı ve o slota giremeyen başka hastanın beklemesi. İkinci maliyet hiç ölçülmediği için tartışma her zaman birincinin üzerinden yürüyordu.

Kısıtların en belirleyicisi etikti. Gelmeme olasılığını iyi tahmin eden bir model, aynı zamanda yapısal engelleri iyi tahmin eden bir modeldir; bu çıktıyı erişim kısıtlamak için kullanmak, tahmini kendi kendini doğrulayan bir cezaya çevirir. İkinci kısıt veri tarafındaydı: alt grup denetimi için gereken nitelikler üretim akışında bulunmamalı, ama denetim de onlar olmadan yapılamıyor. Üçüncüsü iletişim mevzuatı — hatırlatma iletilerinin hangi kategoride sayıldığı ve onay durumunun nasıl yönetileceği kanal tasarımından önce netleşmek zorundaydı.

Veri ve erişim#

Üretim akışındaki değişkenler kasıtlı olarak dar tutuldu: randevunun açılış ile gerçekleşme arasındaki vadesi, saat ve gün, klinik, randevu kanalı, hastanın hastaneye mesafe bandı ve sınırlandırılmış geçmiş katılım bilgisi. Mahalle gelir göstergesi, uyrukluk ve benzeri vekil değişkenler dışarıda bırakıldı; bunların tahmine katkısı vardı ama operasyonel karşılığı yoktu ve modele yalnızca ayrımcı örüntüyü öğretiyordu. Denetim için gereken nitelikler ayrı bir kümede, ayrı yetkiyle ve yalnızca dönemsel denetim koşusu için erişilebilir durumda tutuluyor.

• İptal ve gelmeme ayrı sonuçlar; iptal eden hasta slotu boşaltıyor, gelmeyen hasta boşaltmıyor ve ikisi aynı etiket altında toplanamıyor.
• İptal işaretinin yazılma zamanı ile randevu saati karşılaştırılmadan etiket kurulamıyor; zaman damgası kontrolü etiket tanımının parçası.
• Mesafe bandı adres metninden değil, kurumun tanımlı bölge eşlemesinden türetiliyor; serbest adres metni modele hiç girmiyor.
• Dil tercihi ve engellilik bilgisi gibi alanlar hizmet sunumu için kayıtlı; denetimde kullanılıyor, tahmin girdisi olarak kullanılmıyor.
• Mevsimsel ve dönemsel etkiler güçlü; eğitim penceresi tek bir döneme sıkıştığında model o dönemin davranışını genel kural sanıyor.

Mimari kararlar#

Mimarinin ekseni doğruluk değil zarar dağılımıydı. Aynı model çıktısı, nereye bağlandığına göre bir hastaya hizmet ya da bir hastaya engel üretebiliyor; bu yüzden kararlar önce kullanım yüzeyinde, sonra modelde alındı.

Güvenlik ve yetki#

Denetim kümesi üretim veritabanından ayrı duruyor, erişimi ayrı yetkilendirilmiş ve her denetim koşusu kayda geçiyor; bu ayrım olmadan 'denetim için topluyoruz' gerekçesi hızla üretimde kullanmaya dönüşüyor. Hatırlatma kanalı tarafında iletişim onayı durumu gönderim anında kontrol ediliyor ve onayı olmayan kanala geçiş yapılmıyor. Model çıktısı hasta dosyasına yazılmıyor; kapasite planlama kayıtlarında duruyor ve klinik personelin hasta ekranında görünmüyor.

Ölçüm düzeni#

• Kalibrasyon toplamda değil alt grup içinde ölçülüyor; toplamda iyi kalibre bir model tek tek gruplarda sistematik sapabiliyor.
• Yanlış negatif farkı yayın kapısı: fark eşiği aşıldığında sürüm açılmıyor ve sebebi araştırılmadan tekrar denenmiyor.
• Hatırlatma müdahalesinin karşılık bulma oranı kanal ve alt grup bazında izleniyor, çünkü aynı müdahale her grupta aynı işe yaramıyor.
• Devreye almadan sonra bekleme süresi ve iptal örüntüsü alt gruplar bazında izleniyor; modelin doğru olması zarar vermediğini göstermiyor.
• Eğitim penceresi ile üretim dönemi arasındaki davranış farkı ayrı izleniyor; dönemsel kaymalar model hatası gibi görünmemeli.

Devreye alma ve işletme#

1. 1Etiket tanımının yazılması

   Gelmeme, iptal ve geç iptal ayrı sonuçlar olarak tanımlandı; iptal zaman damgalarının randevu saatiyle ilişkisi etiket kuralına yazıldı.

2. 2Yalnızca raporlama

   Model ilk aşamada hiçbir müdahaleye bağlanmadı; klinik ve saat kırılımında beklenen katılım raporu üretti ve planlamacılar bunu kendi kararlarıyla karşılaştırdı.

3. 3Hatırlatma tarafında sınırlı kullanım

   İlk müdahale yalnızca ek hatırlatma oldu; kapasite tamponu bu aşamada değiştirilmedi, böylece iki etki karışmadı.

4. 4Adillik denetimi ve kapı kontrolü

   Kapasite tamponuna geçilmeden önce alt grup denetimi koşuldu; fark eşiği aşan sürüm açılmadı ve değişken kümesi yeniden gözden geçirildi.

Nerede yanıldık#

Etiket tanımını yeniden okuyunca ilk ölçümlerin neyi ölçtüğünü fark ettik: iptal işareti bazı akışlarda randevu saatinden önce yazılıyordu, yani model cevabı girdi olarak görüyordu ve ölçtüğümüz şey tahmin değil kayıt düzeniydi. Eğitim penceresini tek bir döneme dayandırmak ayrı bir yanılgıydı; o dönemin gelmeme davranışı genel kural gibi öğrenildi ve alt gruplar arasındaki fark ancak farklı bir dönemde devreye alındıktan sonra ortaya çıktı. Kapasite tamponuna hatırlatma müdahalesiyle aynı anda geçmeye kalkmak iki etkiyi birbirine karıştırdı; müdahaleler ayrılmadan hangisinin işe yaradığını söylemek mümkün olmadı ve adım geri alındı. En pahalısı hukuk tarafını mühendislikten sonra düşünmekti: hatırlatma iletilerinin kategorisi ve onay yönetimi netleşmeden yazılan gönderim akışı, netleştikten sonra baştan kurulmak zorunda kaldı.