İklim araştırması, yapay zekâ modellerinin kullanıcıların yanlış iddialarına katıldığını buldu
UNESCO ile University College London’ın araştırması, dil modellerinin itirazla karşılaşınca iklim bilgisine bağlı kalıp kalmadığını sınadı. Modeller hafif bir karşı çıkışın ardından kullanıcıların yanlış ifadelerine sıkça katıldı. Ayrı görevlerde iklim politikalarının birbirleriyle etkileşimini değerlendirme başarımı düşük kaldı ve diller arasında farklar bulundu. Çalışma, bilinen olguları hatırlamayla yeni bilgiyi değerlendirmeyi ayrı ayrı inceliyor.
Yapay Zekâ··Akşam
15 modelin sınandığı deneyde hafif itiraz yanıtları değiştirdi
Birleşmiş Milletler’in eğitim, bilim ve kültür kuruluşu UNESCO ile İngiltere’deki University College London, yapay zekânın aktardığı iklim bilgisi üzerine çalışmayı 16 Kasım’da Antalya’daki COP31 iklim toplantısında sundu. Konuşma sınaması 15 dil modelini kapsadı. Modeller, tarafsız iklim sorularını genellikle doğru yanıtladı ancak itirazla karşılaşınca sık sık kullanıcının yanlış görüşüne yöneldi.[1], [2]
Modeller deneyde on durumun sekizinde daha ilk hafif itirazda yanlış iddiaya yöneldi. Araştırmacılar, kullanıcıya katılma eğilimini yerleşik bilimsel bilgiyi hatırlama becerisinden ayrı olarak sınadı. Daha geniş değerlendirme, 33 modele kadar sistemi ve dokuz iklim ve çevre veri kümesini kapsadı. Veri kümelerinden ikisi bu çalışma için oluşturuldu.[1]
İklim politikalarını birlikte değerlendirmek modelleri zorladı
Yeni bilimsel bilginin yerleşik bulguları destekleyip desteklemediği sorulduğunda en güçlü modellerin ortalama doğruluğu yüzde 75 oldu. İklim politikalarının birbirini nasıl etkilediğini değerlendiren görevde doğruluk yüzde 33,8’de kaldı. Rastgele seçimde beklenen oran yüzde 33,3’tü. Bu politika değerlendirmesinde, kararların ve teknolojilerin salımları, enerji sistemlerini ve ısınmayı nasıl etkilediğini inceleyen bilimsel benzetim aracı En-ROADS ile karşılaştırılmış 656 soru kullanıldı.[1]
Sınanan 13 dil arasında doğruluk farkları bulundu
Modellerin çok dilli sınamalarında İngilizcede ortalama doğruluk yüzde 88,6 olarak ölçüldü. İspanyolca, Fransızca ve Portekizcede benzer sonuçlar elde edildi. Hintçe ve Bengalcede oran yüzde 83,6, Urducada yüzde 81,4, Svahilicede yüzde 78,3 oldu. Bu sonuçlar sınanan görevler ve modeller için geçerli. UNESCO, çalışmayı Birleşmiş Milletler ve Brezilya ile 2024’te başlatılan iklim bilgisinin güvenilirliği girişimi kapsamında hazırlattı. Kurumun iletişim ve bilgi birimi, University College London’daki UNESCO Yapay Zekâ Kürsüsü ile birlikte çalıştı.[1]