Surprisal teorisi, insanların dil işleme zorluklarını kelime tahmin edilebilirliğiyle açıklamaya çalışır. Ancak mevcut çalışmalarda temel bir sorun vardır: dil modelleri kendi token sistemlerini kullanırken, araştırmacılar kelime gibi dilbilimsel birimlerle çalışır. Bu uyumsuzluk, bilimsel sonuçları etkileyen tutarsızlıklara yol açar. Yeni araştırma, bu soruna çözüm getirerek farklı dil birimleri üzerinden surprisal hesaplama için birleşik bir çerçeve sunuyor. Bu yaklaşım, dil işleme araştırmalarında daha tutarlı ve güvenilir sonuçlar elde edilmesine katkı sağlayabilir.

arXiv — Hesaplamalı Dilbilim (cs.CL) 0

Teknoloji & Yapay Zeka

21 Apr

Yapay Zeka Modelleri İnsan Beyni Gibi Karmaşık Cümleleri Anlayabilir mi?

Araştırmacılar, yapay zeka dil modellerinin insan beyninin cümle işleme zorluklarını açıklayıp açıklayamayacağını inceledi. 'Surprisal teorisi' adı verilen yaklaşıma göre, bir kelimenin bağlamında ne kadar beklenmedik olduğu, o cümlenin işlenmesinin zorluğunu belirler. Basit cümleler için bu teori işe yarasa da, 'garden-path' denilen karmaşık cümlelerde - yani okurken yanlış anlamda başlayıp sonra düzeltmemiz gereken cümlelerde - yapay zeka modelleri insan zorluğunu tam olarak yansıtamıyor. Bu durum, sinirsel dil modellerinin insan benzeri cümle işleme yeteneklerinin sınırlarını ortaya koyuyor ve yapay zekanın dil anlama kapasitesinin geliştirilmesi açısından önemli ipuçları sunuyor.

arXiv (CS + AI) 0