Teknoloji & Yapay Zeka

AEGIS: Robot kontrolü için görsel-dil modellerinin hafızasını koruyan yeni yöntem

Araştırmacılar, önceden eğitilmiş görsel-dil modellerini robot kontrolü için uyarlarken karşılaşılan önemli bir sorunu çözen AEGIS adlı yeni bir sistem geliştirdi. Robot kontrolü için bu modelleri eğitirken, sürekli eylem verilerinden gelen yoğun gradyanlar modelin orijinal görsel soru-cevap yeteneklerini hızla bozuyor. Mevcut yöntemler ya gradyan akışını tamamen keserek değerli sürekli denetimi kaybediyor ya da düşük-rank adaptörler kullanarak sınırlı çözümler sunuyor. AEGIS, tampon gerektirmeyen ve katman bazında ortogonal gradyan projeksiyon kullanan yenilikçi bir çerçeve sunarak bu ikilemden kurtarıyor. Bu gelişme, robotik sistemlerde görsel-dil modellerinin daha etkili kullanımına kapı açabilir.

Yapay zeka ve robotik alanında önemli bir gelişme kaydedildi. Araştırmacılar, önceden eğitilmiş görsel-dil modellerinin robot kontrolü için uyarlanması sırasında ortaya çıkan kritik bir problemi çözen AEGIS (Anchor-Enforced Gradient Isolation System) adlı yeni bir sistem geliştirdi.

Görsel-dil modelleri, görüntüleri anlayıp sorulara cevap verebilen güçlü yapay zeka sistemleri. Bu modelleri robotik kontrol için kullanmak istediğimizde ise büyük bir sorunla karşılaşıyoruz: robot hareketleri için gereken sürekli eylem verileri, modelin orijinal yeteneklerini hızla bozuyor.

Sorunun kaynağı, farklı eğitim yöntemlerinden gelen gradyanlar arasındaki uyumsuzluk. Modelin orijinal eğitiminde kullanılan kategorik veriler ile robot kontrolü için gereken sürekli eylem verileri arasında 'spektral boyut uyumsuzluğu' oluşuyor. Bu durum, modelin görsel soru-cevap yeteneklerinin ciddi şekilde erozyona uğramasına neden oluyor.

Mevcut çözümler yetersiz kalıyor. Ya gradyan akışını tamamen keserek değerli sürekli denetim kaybediliyor ya da LoRA gibi düşük-rank adaptörler kullanılarak sınırlı çözümler sunuluyor. AEGIS ise tamamen farklı bir yaklaşım benimsiyor: tampon gerektirmeyen, katman bazında ortogonal gradyan projeksiyon çerçevesi kullanarak bu ikilemden kurtuluyor.

Bu yenilik, robotik sistemlerde görsel-dil modellerinin daha etkili ve güvenli kullanımına olanak sağlayabilir.

Özgün Kaynak
arXiv (CS + AI)
AEGIS: Anchor-Enforced Gradient Isolation for Knowledge-Preserving Vision-Language-Action Fine-Tuning
Orijinal makaleyi oku

Bu içerik, özgün kaynaktaki bilgiler temel alınarak BilimKapsül editörleri tarafından yeniden kaleme alınmıştır. Orijinal metnin birebir çevirisi değildir. Telif hakkı özgün yayıncıya aittir.