Beyin sinyallerinden görsel bilgileri çözümlemek, nörobilim ve bilgisayar görü alanlarının kesişiminde yer alan en zorlu problemlerden biri. Stanford Üniversitesi araştırmacıları, bu sorunu çözmek için MindAlign adını verdikleri yenilikçi bir sistem geliştirdi.
Sistem, EEG (elektroensefalogram) beyin dalgaları, görüntüler ve metin açıklamalarını ortak bir dijital uzayda birleştiren üç modaliteli bir yapı kullanıyor. Bu yaklaşım iki aşamada çalışıyor: İlk aşamada, EEG sinyallerindeki uzamsal ve zamansal düzenlilikleri öğrenmek için maskeli yeniden yapılandırma tekniği kullanılıyor. İkinci aşamada ise beyin sinyalleri, görüntüler ve yapay zeka tarafından üretilen metin açıklamaları karşılaştırmalı öğrenme yöntemiyle hizalanıyor.
Sistemin en dikkat çekici özelliği, hiç görmediği görsel kategorilerde bile çalışabilmesi. Bu 'sıfır atış' öğrenme yetisi, teknolojinin pratik uygulamalar için büyük potansiyel taşıdığını gösteriyor. Özellikle motor korteks hasarı nedeniyle hareket kabiliyetini kaybetmiş hastalar için düşünce tabanlı iletişim sistemleri geliştirilebilir.
Araştırma, beyin-bilgisayar arayüzleri teknolojisinde yeni bir sayfa açarken, gelecekte zihinsel görüntülerin doğrudan dijital ortama aktarılması gibi devrimci uygulamaların temelini atıyor.