Büyük dil modelleri artık hikaye metinlerinde kelimelerin anlamlarını insanlar kadar doğru bir şekilde değerlendirebiliyor. Son dönemde yapılan bir araştırma, yapay zekanın dil anlama kapasitesinin gerçek dünya anlatılarında ne kadar etkili olduğunu inceledi.
SemEval-2026 Görev 5 yarışması kapsamında geliştirilen bu yeni yaklaşım, aynı yazılışa sahip ancak farklı anlamları olan kelimelerin kısa hikayeler içindeki mantıklılığını değerlendiriyor. Örneğin 'bank' kelimesinin bir cümlede 'banka' mı yoksa 'nehir kenarı' mı anlamında kullanıldığını ve bu kullanımın hikaye bağlamında ne kadar makul olduğunu belirleyebiliyor.
Araştırmacılar iki farklı strateji denedi: düşük parametreli modelleri özel olarak eğitme ve büyük parametreli ticari modellere dinamik örnekleme tekniği uygulama. Sonuçlar, büyük ticari modellerin dinamik örnekleme ile insan yargılarına çok yakın sonuçlar verdiğini gösterdi.
Bu gelişme, yapay zekanın dil anlama yetisinin teorik testlerin ötesinde pratik uygulamalarda da başarılı olabileceğini kanıtlıyor. Özellikle otomatik çeviri, metin analizi ve eğitim teknolojileri gibi alanlarda önemli ilerlemeler sağlayabilir.