Karanlık veya düşük ışıklı ortamlarda çekilen görüntülerden 3D sahne yeniden yapılandırması, bilgisayar görüsü alanının en karmaşık problemlerinden biri olarak kabul ediliyor. Mevcut teknolojiler genellikle önceden hesaplanmış kamera pozisyon bilgilerine ve sahne-spesifik optimizasyon süreçlerine bağımlı olduğu için gerçek dünya senaryolarında sınırlı performans sergiliyor.
Araştırmacılar bu sınırlamaları aşmak amacıyla Lumos3D adını verdikleri yenilikçi bir framework geliştirdi. Bu sistem, pozisyon bilgisine ihtiyaç duymadan tek bir ileri geçişte düşük ışıklı 3D sahne restorasyonu gerçekleştiren bir yaklaşım sunuyor. Sistemin temel yeniliği, çapraz aydınlatma damıtması (cross-illumination distillation) tekniğinde yatıyor.
Bu yaklaşımda, normal ışık koşullarında çekilmiş gerçek görüntüleri işleyen donmuş bir öğretmen ağ, doğru geometrik bilgiyi öğrenci modele aktarıyor. Ayrıca araştırmacılar, yeniden yapılandırılmış 3D Gaussian uzayının restorasyon kalitesini artırmak için özel bir 'Lumos kaybı' tanımladı.
Tek bir veri seti üzerinde eğitilen Lumos3D, tamamen ileri beslemeli bir şekilde çalışarak pozisyon bilgisi olmayan düşük ışıklı çok açılı görüntülerden doğrudan aydınlatma ve yapısal bilgiyi restore ediyor. Sistem, sahne bazında ek eğitim veya optimizasyon gerektirmiyor.
Gerçek dünya veri setlerinde yapılan deneyler, Lumos3D'nin başarılı sonuçlar verdiğini gösteriyor. Bu teknoloji, gece görüş sistemleri, güvenlik kameraları ve otonom araçlar gibi düşük ışık koşullarında çalışması gereken uygulamalar için büyük potansiyel taşıyor.