Multispektral görüntüleme teknolojisi, beyin cerrahisinden otonom sürüşe kadar kritik uygulamalarda kullanılan güçlü bir araç. Bu teknoloji, normal kameralardan farklı olarak görünür ışığın ötesindeki dalga boylarında da görüntü alarak, insan gözünün göremediği detayları ortaya çıkarıyor. Ancak multispektral kameralar mozaik şeklinde veri topladığından, tam çözünürlüklü spektral görüntü elde etmek karmaşık bir işlem gerektiriyor.
Geleneksel yöntemler genellikle bulanık sonuçlar verirken, denetimli öğrenme yaklaşımları pahalı ve zaman alıcı referans verilere ihtiyaç duyuyor. Bu referans veriler, yavaş çalışan tarayıcı sistemlerle elde edildiği için gerçek zamanlı uygulamalarda pratik değil. Bu sorunu çözmek için araştırmacılar, Perspektif-Değişmez İnce Ayar Demozaikleme (PEFD) adını verdikleri yenilikçi bir framework geliştirdi.
PEFD sisteminin en önemli yeniliği, sadece mozaik ölçümlerden öğrenebilmesi. Sistem, kamera tabanlı görüntüleme sistemlerinin projektif geometrisinden faydalanarak, önceki yöntemlerden daha zengin grup yapılarını kullanıyor ve böylece kayıp bilgileri daha etkili şekilde geri kazanıyor. Ayrıca, 1-3 kanallı görüntüleme için tasarlanmış önceden eğitilmiş temel modelleri uyarlayarak, etiketli veri olmadan verimli öğreniyor.
Cerrahi ve otomotiv veri setleri üzerinde yapılan testlerde PEFD, kan damarları gibi ince detayları başarıyla tespit ederken spektral doğruluğu da koruyor ve mevcut yaklaşımları önemli ölçüde geride bırakıyor.