Kimya alanında 'akıllı' denen yapay zeka modelleri aslında sadece ezber yapıyor olabilir.
Orijinal başlık: Molecular Déjà Vu: Digit-Level Retrieval of Published Values in Frontier Language Models
KISACA
- Neden önemli?
- Çünkü bu modellerin başarı testleri gerçek tahmin yeteneğini değil hafızayı ölçüyor olabilir.
- Bulgu
- Araştırmacılar 22 modeli test etti; beş veri setinde modellerin yarısından fazlası değerleri ezberden geri getirdi.
Ne oldu?
Araştırmacılar, moleküler özellik tahmininde kullanılan büyük dil modellerinin aslında çoğu zaman 'tahmin' değil 'ezber' yaptığını ortaya koydu. 22 önde gelen modeli 12 farklı kimyasal özellik test setinde inceleyen ekip, modellerin literatürde yayınlanmış sayısal değerleri birebir hatırlayıp geri getirdiğini tespit etti. Beş veri setinde modellerin yarısından fazlası bu 'ezbere geri getirme' davranışını gösterdi. Bulgu, bu tür benchmark'ların model başarısını ölçmek için sanıldığı kadar güvenilir olmayabileceğini gösteriyor.
Bilim camiasının bu benchmark'lara güvenini sarsan ciddi bir bulgu.
Aynı haberin kısa dikey video özeti.
Bu notu kaynak göstererek alıntılayabilirsin: Hasan Amanet, “Kimya alanında 'akıllı' denen yapay zeka modelleri aslında sadece ezber yapıyor olabilir.”, Notes for Data Science, 7 Eylül 2026.