Nörobilim & Psikoloji

Beyin sinyallerinden görsel içerik çözümleme teknolojisi geliştirildi

Araştırmacılar, beyin aktivitesinden görsel uyaranları çözümleyerek doğal dil açıklamaları üretebilen yeni bir yapay zeka sistemi geliştirdi. BrainROI adlı model, fMRI beyin tarama verilerini kullanarak kişinin gördüğü görüntüleri yorumlayabiliyor ve bunları metin açıklamalarına dönüştürebiliyor. Sistem, farklı kişiler arasında çalışabilen genelleştirme yeteneği ile önceki teknolojilere göre önemli ilerlemeler kaydetti. Çalışma, beyin-bilgisayar arayüzleri ve nörolojik hastalıkların tedavisinde potansiyel uygulamalar sunuyor.

Bilim insanları, beyin aktivitesini analiz ederek kişinin ne gördüğünü anlayabilen ve bunu metin açıklamalarına dönüştürebilen gelişmiş bir yapay zeka sistemi yarattı. BrainROI olarak adlandırılan bu teknoloji, multimodal beyin çözümleme alanında önemli bir adım teşkil ediyor.

Sistem, fonksiyonel manyetik rezonans görüntüleme (fMRI) verilerini kullanarak beyin sinyallerini işliyor ve görsel uyaranlarla tutarlı anlamsal bilgileri yeniden oluşturabiliyor. Araştırmacılar, farklı bireylerin beyin yapılarındaki heterojenlik sorununu çözmek için yenilikçi bir fMRI kodlayıcı tasarladı.

Teknolojinin en dikkat çekici özelliği, çok atlasli yumuşak fonksiyonel bölütleme yaklaşımı kullanarak ortak bir beyin haritası oluşturması. Bu sayede sistem, farklı kişilerin beyin verilerini tutarlı şekilde işleyebiliyor ve kişiler arası genelleme yapabiliyor.

NSD veri seti üzerinde yapılan testlerde, BrainROI modeli BLEU-4 ve CIDEr gibi değerlendirme ölçütlerinde mevcut en gelişmiş yöntemlere kıyasla belirgin iyileştirmeler gösterdi. Bu gelişme, beyin-bilgisayar arayüzleri ve nörolojik hastalıkların anlaşılması konusunda yeni fırsatlar yaratıyor.

Özgün Kaynak
arXiv (CS + AI)
Unified Multimodal Brain Decoding via Cross-Subject Soft-ROI Fusion
Orijinal makaleyi oku

Bu içerik, özgün kaynaktaki bilgiler temel alınarak BilimKapsül editörleri tarafından yeniden kaleme alınmıştır. Orijinal metnin birebir çevirisi değildir. Telif hakkı özgün yayıncıya aittir.