Stanford Üniversitesi araştırmacıları, retina görüntülerinden otomatik tıbbi rapor üreten gelişmiş bir yapay zeka sistemi geliştirdi. DREAM (Dynamic Retinal Enhancement with Adaptive Multi-modal Fusion) adlı bu sistem, göz hastalıklarının teşhisinde doktorlara önemli bir yardımcı araç sunuyor.
Mevcut büyük görme-dil modelleri, tıp gibi uzmanlaşmış alanlarda genellikle yetersiz kalıyor ve sınırlı veri nedeniyle aşırı öğrenme sorunları yaşıyor. Bu durum, kritik ancak belirgin olmayan hastalık belirtilerinin gözden kaçmasına neden olabiliyor.
DREAM sistemi bu sorunu iki aşamalı benzersiz bir füzyon mekanizmasıyla çözüyor. İlk aşamada Abstractor modülü, görüntü ve oftalmologlar tarafından seçilen klinik anahtar kelimelerin özelliklerini ortak bir alanda birleştiriyor. Bu sayede görsel veriler, hastalık ile ilgili önemli bilgilerle zenginleştiriliyor.
İkinci aşamada ise Adaptor modülü devreye giriyor. Bu modül, öğrenilebilir parametreler kullanarak her modalitenin önemini dinamik olarak ayarlıyor ve adaptif çok modlu füzyon gerçekleştiriyor. Bu yaklaşım sayesinde sistem, sınırlı veri ile bile yüksek doğrulukta tıbbi rapor üretebiliyor.
Araştırma, oftalmoloji alanında tanı doğruluğunun artırılmasına katkı sağlarken, yapay zekanın tıbbi görüntüleme alanındaki potansiyelini de ortaya koyuyor.