Minimal invaziv cerrahi alanında 3D görüntü reconstruction teknolojisi, ameliyat sırasında daha iyi görselleştirme ve rehberlik sağlamak için kritik öneme sahip. Ancak geleneksel RGB tabanlı sistemler, zayıf doku yapıları ve karmaşık aydınlatma koşulları gibi cerrahi zorluklarla başa çıkmakta güçlük çekiyor.
Bilim insanları bu soruna çözüm olarak HyKey adında yenilikçi bir sistem geliştirdi. Bu teknoloji, snapshot hiperspektral görüntüleme (HSI) kullanarak ameliyat sahnesindeki anahtar noktaları tespit etme ve eşleştirme performansını önemli ölçüde artırıyor.
HyKey sistemi, hibrit 3D-2D konvolüsyonel sinir ağı mimarisi kullanarak hiperspektral görüntülerden uzamsal ve spektral özellikleri aynı anda çıkarıyor. Model, sentetik homografik büyütme ve epipolar geometri kısıtlamaları kullanılarak eğitildi.
Araştırma ekibi, robotik olarak elde edilmiş ikili kamera RGB-HSI laparoskopik veri seti üzerinde sistemi test etti. Ex-vivo organ örnekleri kullanılarak gerçekleştirilen deneylerde, HyKey'in geleneksel RGB tabanlı yöntemlere kıyasla üstün performans sergilediği gözlemlendi.
Bu teknoloji, cerrahi araç takibi, artırılmış gerçeklik uygulamaları ve gelişmiş görsel rehberlik sistemlerinde önemli iyileştirmeler sağlayabilir.