Yapay zeka teknolojisinin hızla gelişmesiyle birlikte, büyük dil modelleri birçok dilde akıcı bir şekilde konuşabilir hale geldi. Ancak yeni bir araştırma, dil akıcılığının tek başına yeterli olmadığını ve yapay zekanın sosyal bağlamları anlamakta ciddi eksiklikleri olduğunu ortaya koydu.
Araştırmacılar, Bengalce konuşan toplumların karmaşık sosyal yapılarını anlamak için BanglaSocialBench adlı özel bir değerlendirme sistemi geliştirdi. Bu test, yapay zekanın sadece dil bilgisini değil, o dilin konuşulduğu kültürün sosyal kurallarını ne kadar iyi kavradığını ölçüyor.
Bengalce, sosyal hiyerarşiyi dile yansıtan üç katmanlı zamir sistemiyle dikkat çekiyor. Bu dilde hangi zamiri kullanacağınız, karşınızdaki kişinin yaşına, sosyal statüsüne ve sizinle olan ilişkisine bağlı olarak değişiyor. Ayrıca akrabalık ilişkilerine dayalı hitap biçimleri ve toplumsal gelenekler de günlük konuşmaya doğrudan yansıyor.
1719 farklı durumu içeren bu kapsamlı testte, anadili Bengalce olan uzmanlar tarafından hazırlanan senaryolar kullanıldı. Test edilen 12 çağdaş yapay zeka modeli, bu sosyal incelikleri anlamakta sistematik olarak başarısız oldu.
Bu sonuçlar, yapay zekanın gerçek dünyada farklı kültürlerle başarılı etkileşim kurabilmesi için sadece dil öğrenmesinin yeterli olmadığını gösteriyor. Çok dilli yapay zeka sistemlerinin geliştirilmesinde kültürel hassasiyetin de dikkate alınması gerektiği vurgulanıyor.