METR, Anthropic’te araştırmanın hızlandığını hesapladı; önemli kanıtlar gizli kaldı
METR, Anthropic’in araştırma süreçlerini incelediği değerlendirmede şirket içi yetenek endeksinin artış hızını önceki eğilimin 1,9 katı hesaplıyor. Kuruluş, hızlanmada yapay zekânın önemli payı olduğunu düşünüyor; nedensel katkıya ilişkin belirsizlik ise daha yüksek. Anthropic, genel sonuçların açıklanmasına izin verirken değerlendiricilerin en yararlı bulduğu kanıtların büyük bölümünü gizledi. İnceleme, insanlara yardım ile tamamen özerk araştırmayı ayrı ele alıyor.
Yapay Zekâ··Sabah
İnceleme, şirket içi yetenek endeksini izliyor
Yapay zekâ değerlendirme kuruluşu METR, Anthropic’te araştırmanın hızlanmasına ilişkin incelemesini yayımladı. Anthropic’in şirket içi yetenek endeksindeki artış hızını önceki eğilimin 1,9 katı hesaplıyor; yüzde 95 güven aralığı 1,5–2,8 kat. METR, hızlanmada yapay zekânın önemli katkısı olduğunu düşünüyor. Yapay zekânın nedensel payını, gözlenen eğilime göre daha belirsiz görüyor. Bu ölçüm tek tek araştırmacıların görev tamamlama hızını vermiyor.[1], [2]
Görüşmeler, sayısal karşılaştırmaya eşlik ediyor
İnceleme, 12 Ağustos–29 Ekim arasındaki 11 haftayı kapsadı. İç deneyler ve araştırma süreçleri hakkında yaklaşık 15 görüşme yapıldı. METR, ödeme almadığını; Anthropic’in cihaz ve ücretsiz model kullanımı sağladığını belirtiyor. Sayısal çözümlemede model puanlarına uydurulan eğrinin kırılma noktası 7 Ekim 2025 olarak hesaplandı. Güven aralığı puanların yeniden örneklenmesine dayanıyor; model seçimine ve nedenselliğe ilişkin bütün belirsizlikleri kapsamıyor.[1]
Anthropic, dayanakların büyük bölümünü gizli tuttu
Anthropic, genel sonuçların yayımlanmasına izin verdi ancak METR’nin en yararlı bulduğu kanıtların büyük bölümünü gizledi. Gerekçe olarak rakiplerin çalışmalarını hızlandırabilecek gizli bilgileri gösterdi. METR de bu sınırlamaların sonuçlarını nerede etkilediğini açıklıyor. Kuruluş, insan araştırmacılara yardımla tamamen özerk araştırmayı ayrı değerlendiriyor. Tam özerk araştırmanın, en önemli model eğitimi işlerine henüz çok büyük katkı sağlamadığı görüşünü aktarıyor.[1]
İlgili köşe yazıları
Bu gündem hakkında daha fazla bilgi için ilgili köşe yazılarını okuyabilirsiniz.
