Trakkr araştırması, yapay zekanın istatistik alıntılama doğruluğunun düşük olduğunu ortaya koydu

Analitik şirketi Trakkr Research, popüler yapay zeka asistanlarının referans verdiği verilerin doğruluğunu denetledi. Sonuçlar, ChatGPT, Perplexity ve Google AI Overviews yanıtlarında verilen istatistiksel göstergelerin yalnızca %40'ının gerçek bir bilimsel veya araştırmaya dayalı temeli olduğunu gösterdi.

Test sırasında, modellerin genellikle ikna edici görünen ancak birincil kaynağa yönlendirmeyen "zombi istatistikleri" ürettiği ortaya çıktı. Analiz edilen sistemler arasında en iyi performansı, iddialarının %57'sini gerçek araştırmalara dayandıran ChatGPT sergiledi. Diğer araçlar, olguları doğrulama konusunda önemli ölçüde daha düşük bir başarı gösterdi.

Kullanıcılar için bu durum, yapay zeka modellerinden alınan her türlü nicel verinin mutlaka yeniden kontrol edilmesi gerektiği anlamına geliyor. Sayılarla çalışırken halüsinasyon görme olasılığının yüksek olması, mevcut yapay zeka asistanlarını analitik raporlar hazırlamak veya kesin istatistiksel göstergelere dayalı kararlar almak için güvenilmez kaynaklar haline getiriyor.