Büyük dil modelleri günümüzde insanlarla yapılan tartışmalarda oldukça etkileyici performans sergiliyor. Ancak yeni bir araştırma, bu AI sistemlerinin ikna edici gücü ile gerçek anlayış seviyeleri arasında ciddi bir uçurum olduğunu ortaya koyuyor.
Araştırmacılar, insanlar ve büyük dil modelleri arasında düzenlenen gayri resmi tartışmaları inceleyerek bu durumu araştırdı. Çalışmada önce AI'ların ikna etme becerileri ölçüldü, ardından bu beceriler argüman yapılarını ve pragmatik bağlamı anlama yetenekleriyle karşılaştırıldı.
Sonuçlar dikkat çekici: AI sistemler tutarlı ve ikna edici tartışmalar yürütebiliyor, hatta hem tartışma katılımcılarının hem de dinleyicilerin görüşlerini değiştirebiliyor. Bu durum, yapay zekanın yüzeysel seviyede ne kadar başarılı olduğunu gösteriyor.
Bununla birlikte, AI'ların varlığından haberdar olan veya bunu şüphelenen kişiler, sunulan argümanlara karşı daha eleştirel yaklaşım sergiliyor. Bu, farkındalığın önemini vurguluyor.
Asıl kritik bulgu ise şu: AI'lar derin diyalog yapılarını kavrayamıyor. Argüman kalitesini değerlendirme, destekleyici önermelerin varlığını tespit etme gibi temel anlayış becerilerinde yetersiz kalıyorlar. Bu durum, ikna edici konuşma yeteneği ile gerçek anlayış arasında önemli bir kopukluk olduğunu gösteriyor.