Belirsizlik altında yol haritası ve paydaş iletişimi
Ulaşılabilir kalitenin ölçülmeden bilinmediği bir işte yol haritasını teslim taahhütleri yerine bilinmezlik kapatan kilometre taşlarına bölmeyi ve aynı durumu paydaş grubuna göre farklı çözünürlükte anlatmayı öğretir.
Önkoşul: Responsible AI, Guardrails
BU DERSİN SONUNDA
- Keşif adımlarını teslim taahhütlerinden ayırmak
- Her kilometre taşına karar verdiren bir çıkış ölçütü yazmak
- Kapatma ve daraltma seçeneklerini planın baştan parçası yapmak
- Aynı durumu yönetim, satış ve ekip için farklı ayrıntı düzeyinde anlatmak
- 1
Teori
Kavramın çalışma mantığı
- 2
Örnek
Gerçek bir senaryo üzerinde gösterim
- 3
Lab
Uygulamalı alıştırma
- 4
Test
Kısa ölçüm
- 5
Proje
Rotadaki projeye katkı
Kısa cevap
Yapay zekâ özelliğinde en büyük bilinmeyen kapsam değil, o görevde ulaşılabilecek kalite seviyesidir; bu da ölçülmeden bilinmez. Bu yüzden yol haritası teslim listesinden değil, bilinmeyeni kapatan adımlardan kurulur. Her adımın çıktısı bir özellik değil bir karardır: devam et, kapsamı daralt, kapat. Tarih taahhüdü ancak keşif kapandıktan sonraki tahmin edilebilir işe verilir.
Teori: iki farklı saat#
Planda birbirine karışan iki saat vardır. Keşif saati, sonucu önceden bilinemeyen işi ölçer: bu yaklaşım bu görevi çözüyor mu, gerçek girdiler varsaydığımıza benziyor mu. Teslim saati ise öğrenilmiş şeyin ürünleştirilmesini ölçer ve klasik tahmin yöntemleriyle yönetilebilir. İki saat karıştırıldığında iki tipik arıza görülür: keşif bir tarihe zorlanır ve aceleyle yapılan ölçüm kötü karar üretir, ya da teslim işi keşifle aynı torbaya konur ve hiçbir şeye tarih verilemez.
Çözüm, keşif adımına süre yerine bütçe vermektir: kaç kişi-hafta ve hangi ölçüm kapasitesi. Bütçe dolduğunda karar vermek zorunludur; bütçeyi uzatmak da bir karardır ve gerekçesiyle kayda geçer. Çıkış ölçütü ise ölçüm yapılmadan önce yazılır, çünkü sonradan yazılan ölçüt farkında olmadan çıkan sonucu haklı çıkarma biçimine bürünür.
Uygulamada: kilometre taşı yerine karar#
| Kilometre taşı | Kapanan bilinmeyen | Çıkış ölçütü | Ölçüt karşılanmazsa |
|---|---|---|---|
| Başarı tanımı ve görev seti | Başarı neye benziyor, kim karar veriyor | Görev seti ve kabul eşiği yazılı; iki bağımsız değerlendirici aynı örneklerde tutarlı | Sorun kalite değil tanım: kapsamı tek bir göreve indirip yeniden yaz |
| Kaba prototip | Bu yaklaşım görevi ilkesel olarak çözüyor mu | Küçük görev setinde eşiği aşan en az bir kurulum var | Yaklaşımı değiştir; aynı yaklaşımı iyileştirmeye ek bütçe verme |
| Kapalı kullanıcı grubu | Gerçek girdi dağılımı varsaydığımıza benziyor mu | Gerçek girdilerdeki başarı, iç ölçümden kabul edilebilir sapmada | Girdi kısıtı ekle veya senaryoyu daralt, kaliteyi zorlamadan önce kapsamı küçült |
| Gözetimli yayın | Gözetim yükü mevcut kapasiteye sığıyor mu | Gözetim oranı ve düzeltme süresi planlanan kapasite içinde | Otomasyon yerine yardımcı konumlan; karar anını kullanıcıya bırak |
| Kademeli açma | Kalite yeni kullanıcı segmentlerinde korunuyor mu | Segment bazlı ölçüm eşiğin üstünde kalıyor | O segmenti kapat ve nedeni bir hata sınıfına bağla, genel eşiği düşürme |
Karar: planı kurma akışı#
- 1Bilinmeyenleri sırala
Planı özelliklere göre değil bilinmeyenlere göre yaz; yanlış çıktığında en çok işi çöpe atacak varsayımı en başa al.
- 2Her bilinmeyene bütçe ver
Süre değil bütçe: kaç kişi-hafta, hangi ölçüm kapasitesi. Bütçe dolduğunda karar ertelenemez.
- 3Çıkış ölçütünü önceden yaz
Ölçüt, ölçüm başlamadan yazılır ve ekiple paylaşılır; sonradan yazılan ölçüt sonucu meşrulaştırmaya kayar.
- 4Daraltma ve kapatma seçeneklerini adlandır
Her taş için devam, daralt ve kapat kararlarının somut karşılığını yaz. Kapatma seçeneği olmayan plan, plan değil taahhüttür.
- 5Tarihi yalnızca teslim işine ver
Keşif kapandıktan sonra kalan iş tahmin edilebilir hâle gelir; taahhüt tarihi o noktada verilir.
İletişim: aynı gerçek, üç çözünürlük#
- Yönetim: hangi kararı ne zaman vereceğiz, bütçe nereye gidiyor, hangi bulgu planı değiştirir. İhtiyaç duyulan şey model metriği değil karar takvimidir.
- Satış ve müşteri ilişkileri: özellik neyi yapar, neyi yapmaz, hata olduğunda kullanıcı ne yapar. Ölçüm metodolojisi değil, sınırların günlük dildeki karşılığı.
- Ekip: bu hafta hangi bilinmeyeni kapatıyoruz, ölçümü kim koşturuyor, hangi örnekler başarısız oldu. Yol haritası özeti değil, açık sorular listesi.
- Kullanıcı: çıktının nasıl üretildiği, neyi doğrulaması gerektiği ve nereye itiraz edebileceği. İç ölçüm sayıları değil, doğrulama ve itiraz yolu.
Bu anlatımın malzemesi rotanın önceki bölümlerinde zaten üretildi: başarı tanımı, değerlendirme planı, risk ve gözetim tablosu, veri yolu haritası. İletişim ayrı bir yaratıcı iş değil, bu dört belgenin kitleye göre kırpılmış hâlidir. Belgeler yoksa iletişim de kaçınılmaz olarak iyimser tahmine dayanır.
Sık yapılan hata#
İki hata sık tekrarlanır. Birincisi keşif adımını yüzde tamamlanmayla raporlamak: bir bilinmeyen yüzde yetmiş kapanmaz, ya karar üretilmiştir ya üretilmemiştir; rapor "hangi bilinmeyen kapandı, hangi karar verildi" biçiminde kurulur. İkincisi gösterimi kanıt saymaktır. Seçilmiş tek bir örnek beklentiyi ölçümün üstüne çıkarır; sonraki toplantıda ölçüm gerçeği gösterdiğinde yaşanan güven kaybı özellikten değil, önceki iletişimden gelir.
LAB · UYGULAMALI ALIŞTIRMA
Çeyrek planını bilinmeyenlere göre yeniden yazın
- 1Sahip olduğunuz özellik için önümüzdeki çeyreğin mevcut planını maddeler hâlinde yazın ve her maddeyi teslim mi yoksa öğrenme adımı mı olduğuna göre işaretleyin.
- 2Planın dayandığı varsayımları listeleyip her birine "yanlış çıkarsa planın ne kadarı çöker" sorusunu tek cümleyle yanıtlayın.
- 3En pahalı üç varsayımı seçin ve her biri için bir kilometre taşı tanımlayın: kapanan bilinmeyen, kişi-hafta bütçesi, önceden yazılmış çıkış ölçütü.
- 4Her kilometre taşı için devam, kapsamı daralt ve kapat kararlarının somut karşılığını birer cümleyle yazın.
- 5Aynı planı iki sürümde özetleyin: yönetim için en çok on satırlık karar takvimi, satış için en çok on satırlık yapar/yapmaz listesi.
- 6Son yaptığınız gösterimin notlarını gözden geçirip kaç örnek gösterdiğinizi ve bunların kaçının başarısız örnek olduğunu sayın; henüz gösterim yapmadıysanız planladığınız ilk gösterimin örnek listesini yazın. İki durumda da bir sonraki gösterim için başarısız örnek kotası belirleyin.
Beklenen çıktı
Bilinmeyenlere göre yazılmış üç kilometre taşlı çeyrek planı, her taş için çıkış ölçütü ve karar seçenekleri, iki farklı kitleye uyarlanmış birer sayfalık özet.
Sık sorulan sorular
Tarih vermeden bir yol haritası yönetilebilir mi?
Tarih verilmiyor değil; tarihin neye verildiği değişiyor. Keşif adımına bütçe ve bir karar günü verilir ("bu tarihte devam, daralt ya da kapat kararını vereceğiz"), teslim işine ise çıktı tarihi verilir. Yönetimin ihtiyaç duyduğu öngörülebilirlik çoğu zaman çıktı tarihinden değil, kararların ne zaman verileceğinin bilinmesinden gelir.
Kapatma ölçütünü baştan yazmak ekibi demoralize etmez mi?
Pratikte tersi daha sık görülür: durma ölçütü olmayan iş, bitmediği için sürer ve ekip sonu görünmeyen bir çalışmada kalır. Baştan yazılmış kapatma ölçütü, kapatma kararını kişisel bir başarısızlık olmaktan çıkarıp planlamanın beklenen bir sonucuna çevirir; ayrıca ekibe hangi kanıtın işi kurtaracağını da söyler.
Ölçüm sayılarını paydaşlarla paylaşmalı mıyım?
Karar için gerekli olan kadarını, tanımıyla birlikte paylaşın. Tanımsız bir sayı kendi hayatını yaşar ve bir sonraki çeyrekte hedefe dönüşür. Bir sayıyı söylerken hangi görev setinde, hangi tarihte ve hangi kabul eşiğine göre ölçüldüğünü aynı cümlede söyleyin; söylenemiyorsa o sayı henüz paylaşılacak olgunlukta değildir.
LEARN
AI Product Manager rotasına devam et
Dersler tek başına da okunabilir, ama sıralı ilerlemek önkoşul boşluklarını kapatır.