MODEL VARLIĞI
SWE-Check
SWE-Check, Cognition'ın 14 Nisan 2026'da yayımladığı hata tespit modeli. Genel amaçlı bir kodlama modeli değil: tek işi değişiklikteki hatayı bulmak. Cognition, dağılım içi (in-distribution) iç değerlendirmelerinde Opus 4.6'ya olan F1 farkının 0,09'dan 0'a indiğini, yani paritenin sağlandığını bildiriyor; dağılım dışı testlerde fark 0,49'dan 0,29'a inmiş ama kapanmamış. Buna karşılık çalışma süresi bir büyüklük mertebesi daha kısa — bu, her değişikliği inceleme hattına sokmayı ekonomik kılan fark. Genel kodlama, mimari tasarım veya çok adımlı görev yürütme için konumlandırılmamış.
Künye
Kapalı- Geliştirici
- Cognition
- Model tipi
- Kod inceleme modeli
- Modaliteler
- metin · kod
- Açık ağırlık
- Yok
- Lisans
- Tescilli
- Yayın
- 2026-04-14
Son doğrulama: 12 Eylül 2026
Yetenekler
- Kod değişikliklerinde hata tespiti
- Dağılım içi iç değerlendirmede Opus 4.6'ya F1 farkı 0 (paritede)
- Opus 4.6'ya göre yaklaşık 10 kat daha hızlı çalışma
- Sürekli inceleme hattına (her PR/değişiklik) sokulabilecek maliyet profili
Sınırlılıklar
- Uzman model: kod yazma, mimari tasarım ve çok adımlı görev yürütme için tasarlanmamış
- Dağılım dışı (out-of-distribution) testlerde Opus 4.6'nın gerisinde: F1 farkı 0,49'dan 0,29'a inmiş ama kapanmamış
- Duyuruda birim fiyat verilmiyor
- Erişim Cognition ürün hattına bağlı; bağımsız API olarak belgelenmemiş
Tipik kullanım alanları
- Otomatik kod incelemesi ve hata avı
- Ajan çıktısının doğrulanması
- Sürekli tümleştirme hattında hata taraması
- Güvenlik açığı aramasında ön filtre
Benchmark politikası
Bu sayfada skor tablosu yer almaz. Sinaptik Lab, yalnızca test verisi, model sürümü, örnekleme ayarları ve örneklem sayısı yayımlanmış ölçümleri raporlar. Metodoloji
BUILD
Hangi modeli seçeceğinize karar veremiyor musunuz?
Kendi görev setiniz üzerinde kalite, gecikme, maliyet ve uyum kısıtlarını birlikte ölçüyoruz.
