DEĞERLENDİRME · Başlangıç
Değerlendirme Testi — Başlangıç
Değerlendirme sözlüğünü, yöntem ile görev eşleşmesini ve tek sayıya güvenmenin sınırını temel düzeyde ölçen test.
- Soru
- 6
- Süre
- 8 dk
- Ölçülen beceri
- 4
- Seviye
- Başlangıç
Kimler çözmeli?
Yapay zekâ projelerine yeni katılan ürün, test ve içerik ekipleri için; önkoşul gerektirmez.
Ölçülen beceriler
- Temel kavram ayrımı
- Yöntem eşleştirme
- Ölçüt okuma
- Risk farkındalığı
Testi çöz
Her cevaptan sonra doğru yanıt ve açıklaması gösterilir. Sonuçta beceri bazlı kırılım ve eksik alan önerisi alırsın.
6 soruluk testi çözmeye hazır mısın?
Her cevaptan sonra doğru yanıt ve açıklaması gösterilir. Sonuçta beceri bazlı kırılım ve eksik alanlar için öneri alırsın.
Bu test neyi ölçüyor?
Test sonrası ne bildiğini değil, hangi beceride eksik olduğunu görürsün.
- 01
Otomatik ölçüm ile insan değerlendirmesini ayırt etmek
- 02
Bir görev tipine uygun ölçüm yöntemini seçmek
- 03
Tek bir doğruluk sayısına güvenmenin sınırını açıklamak
Sorular sayfada görünür
Eğitim içeriği JavaScript arkasına gizlenmez. Aşağıdaki üç örnek soru, doğru cevapları ve açıklamalarıyla birlikte taranabilir durumdadır.
- Soru 01degerlendirme-baslangic-1Veri ayrımı · Başlangıç · Temel kavram ayrımı
Bir modelin başarısı neden eğitimde kullanılan örneklerle değil, ayrı tutulmuş bir kümeyle ölçülür?
- AEğitim verisi genellikle test verisinden daha gürültülü ve etiketsiz olduğu için
- BEğitimde görülen örneklerdeki başarı ezberlemeyi içerir, genellemeyi göstermez
- CEğitim kümesi büyük olduğundan ölçümün koşulması çok uzun sürdüğü için
- DÖlçümün eğitimden sonra yapılması modelin ağırlıklarını değiştirebileceği için
Açıklama
Model eğitimde gördüğü örneği yeniden üretebilir; bu yüzden o örneklerdeki başarı, görülmemiş girdilerde ne olacağını göstermez. Ölçümün ağırlıkları değiştirebileceği seçeneği makul durur ama değerlendirme yalnızca çıkarım yapar, öğrenme adımı içermez.
Evaluation girdisini oku - Soru 02degerlendirme-baslangic-2İnsan değerlendirmesi · Başlangıç · Yöntem eşleştirme
Bir müşteri destek asistanının yanıtlarının uygunluğunu ve tonunu ölçmek için hangi yaklaşım daha uygundur?
- AYanıt ile referans metin arasındaki kelime örtüşmesini hesaplamak
- BYanıt ile referans cevabın gömme benzerliğini eşiğe bağlamak
- CYanıtın beklenen alanları taşıyıp taşımadığını şema doğrulamasıyla denetlemek
- DYazılı bir ölçüt ve ölçek üzerinden insan değerlendirmesi yapmak
Açıklama
Ton ve uygunluk gibi yargı gerektiren nitelikler için ölçüt yazılıp insana puanlatılır; otomatik benzerlik ölçümleri bu niteliği doğrudan görmez. Gömme benzerliği çekici bir kestirmedir ama anlam yakınlığı ölçer, kibarlığı veya bağlama uygunluğu ölçmez.
Evaluation girdisini oku - Soru 03degerlendirme-baslangic-3Doğruluk oranı · Başlangıç · Ölçüt okuma
Nadir bir durumu tespit eden bir sınıflandırıcıda yüksek genel doğruluk oranı neden yanıltıcı olabilir?
- AModel her örneği sık sınıfa atadığında da yüksek doğruluk çıkabileceği için
- BDoğruluk oranı sınıf sayısı arttıkça kendiliğinden yükseldiği için
- CDoğruluk oranı yalnızca sınıf dağılımı dengeli kümelerde hesaplanabildiği için
- DDoğruluk oranı modelin ürettiği güven skorunu hesaba katmadığı için
Açıklama
Nadir durumu hiç yakalamayan bir model bile, örneklerin ezici çoğunluğu sık sınıfa ait olduğu için yüksek doğruluk raporlayabilir; bu yüzden nadir sınıf için ayrı ölçümler gerekir. Doğruluğun yalnızca dengeli kümelerde hesaplanabildiği seçeneği kulağa teknik gelir ama hesaplanabilirlik sorunu yoktur, yorumlanabilirlik sorunu vardır.
Evaluation girdisini oku
Skor nasıl okunur?
AI Curious
0–35
Kavramları duymuş, henüz haritası yok.
AI Explorer
36–60
Temelleri biliyor, uygulamada boşluklar var.
AI Practitioner
61–80
Uygulama kurabiliyor, değerlendirme eksik.
AI Builder
81–100
Üretim sistemi kurabiliyor ve ölçebiliyor.
Ölçmeye devam et
- DeğerlendirmeDeğerlendirme Testi6 soru · 10 dk
- DeğerlendirmeDeğerlendirme Testi — İleri6 soru · 15 dk
- Benchmark TasarımıBenchmark Tasarımı Testi — İleri6 soru · 15 dk
- Benchmark TasarımıBenchmark Tasarımı Testi — Orta6 soru · 12 dk
- GözlemlenebilirlikGözlemlenebilirlik Testi — İleri6 soru · 15 dk
- GözlemlenebilirlikGözlemlenebilirlik Testi — Orta6 soru · 12 dk
LEARN
Eksik çıkan beceriyi kapat
Test sonucun beceri grafiğine işlenir; sistem hangi dersle devam etmen gerektiğini söyler.