Bilim insanları, beyin tabanı cerrahisinde devrim yaratabilecek sesli kontrollü bir yapay zeka sistemi geliştirdi. Bu yenilikçi teknoloji, cerrahların ameliyat sırasında doğal dille komut vererek gerçek zamanlı görüntü analizi ve navigasyon desteği almasını mümkün kılıyor.
Geleneksel cerrahi navigasyon sistemleri genellikle harici optik izleyiciler ve ek donanım kurulumu gerektirirken, bu yeni framework tamamen ameliyat videoları üzerinde çalışıyor. Sistem, cerrahi aletin interaktif segmentasyonu ve etiketlenmesiyle başlayarak, segmente edilen aleti video akışında özerk olarak takip ediyor.
Teknolojinin en dikkat çekici özelliği, cerrahların ameliyat görevlerinden kopmadan hesaplamalı yardım talep edebilmesidir. Doğal dil etkileşimi ile entegre olan sistem, canlı ameliyat video akışları üzerinde gerçek zamanlı görsel algılama gerçekleştiriyor.
Bu çalışma, anatomik segmentasyon, preoperatif 3D modellerin interaktif kayıtlanması ve monoküler video tabanlı tahmin gibi alt iş akışlarını destekleyerek cerrahi hassasiyeti artırmayı hedefliyor. Özellikle beyin tabanı gibi kritik anatomiyle çalışırken, cerrahların ellerini ayırmadan teknik destek alması hayati önem taşıyor.