Yapay zeka alanında çığır açan yeni bir çalışma, robotların filmleri tıpkı insanlar gibi izleyip duygusal içerikleri anlayabilmesinin önünü açıyor. Araştırmacılar, mevcut duygu analizi sistemlerinin sinema kalitesindeki görüntüler için tasarlandığını, ancak robotların gerçek hayatta ekranları farklı açılardan ve koşullarda izlediğini fark etti.
EgoScreen-Emotion (ESE) adıyla geliştirilen bu yeni sistem, robotların birinci şahıs bakış açısından ekran izleme deneyimini simüle ediyor. Sistem, görüş açısı bozulmaları, ölçek değişimleri, ışık farklılıkları ve çevresel müdahaleleri hesaba katarak daha gerçekçi koşullarda çalışabiliyor.
Veri seti, kontrollü koşullarda çekilen 224 film fragmanını içeriyor ve çoklu değerlendiriciler tarafından 28.667 anahtar kare dikkatli bir şekilde etiketlendi. Duygusal belirsizlikleri ele almak için güven temelli çok etiketli bir protokol kullanılarak her kare analiz edildi.
Araştırmacılar ayrıca görsel kanıtları ve anlatı özetlerini modelleyen uzun bağlamlı bir duygu analizi çerçevesi de geliştirdi. Bu teknoloji, gelecekte ev asistanı robotları, terapötik uygulamalar ve eğitim amaçlı yapay zeka sistemlerinde kullanılabilecek.