Bilgisayar görüşü alanında çalışan araştırmacılar, yüz ifadeleri ve yüzsel kas hareketlerini aynı anda analiz edebilen gelişmiş bir yapay zeka sistemi geliştirdi. Bu yenilikçi yaklaşım, duygusal davranış analizi alanında önemli bir adım teşkil ediyor.
Yüzsel hareket birimleri (AU) tespiti ve yüz ifadesi tanıma, duygusal yüz davranışlarının iki farklı boyutunu temsil ediyor. Hareket birimleri ince taneli kas aktivasyonlarını gösterirken, yüz ifadeleri daha genel duygusal durumları yansıtıyor. Her ne kadar bu iki alan arasında güçlü semantik bağlantılar bulunsa da, mevcut çalışmalar genellikle tek yönlü bilgi transferine odaklanmıştı.
Araştırmacıların geliştirdiği Yapısal Anlamsal Haritalama (SSM) framework'ü, bu soruna çözüm getiriyor. Sistem, farklı veri setlerindeki heterojen koşulları da göz önünde bulunduruyor. AU ve yüz ifadesi veri setleri arasında etiketleme paradigmaları, etiket ayrıntı düzeyi ve veri erişilebilirliği açısından önemli farklılıklar bulunuyor.
SSM framework'ü üç temel bileşenden oluşuyor: birleşik görsel temsiller öğrenen paylaşımlı bir görsel omurga, çift yönlü bilgi transferi sağlayan semantik haritalama modülü ve heterojen veri koşullarına uyum sağlayan adaptasyon mekanizmaları. Bu teknoloji, insan-bilgisayar etkileşimi, psikolojik araştırmalar ve otomatik duygu tanıma sistemlerinde önemli uygulamalara sahip olabilir.