Araştırmacılar, robotların dokunma ve görme duyularını birleştirerek çevreyi daha iyi algılayabilmesi için ViTaPEs adlı yeni bir yapay zeka modeli geliştirdi. Bu model, transformer mimarisini kullanarak görsel ve dokunsal verileri aynı anda işleyebiliyor. Robotik alanında önemli bir gelişme olan bu sistem, malzeme dokusunu, sertliğini ve kuvvet bilgilerini görsel verilerle harmanlayarak daha kapsamlı çevresel algı sağlıyor. Model, iki aşamalı konumsal kodlama sistemi kullanarak her modaliteye özel yerel kodlamalar ve ortak global kodlamalar uyguluyor. Bu yaklaşım, robotların farklı görevlerde ve ortamlarda daha başarılı performans göstermesini sağlayabilir.

arXiv (Robotik) 0

Teknoloji & Yapay Zeka

21 Apr

Yapay Zeka Nesli Tükenmekte Olan Dilleri Konuşmayı Öğreniyor

Araştırmacılar, büyük dil modellerinin hiç eğitim almadıkları dilleri bile tanıyıp çevirebildiğini keşfetti. Phi-4 ve Qwen3-Omni gibi gelişmiş AI sistemleri, ses ve metin verilerini birlikte kullanarak nesli tükenmekte olan üç farklı dili başarıyla öğrendi. Bu çalışma, dünya genelinde binlerce dilin kaybolma tehlikesiyle karşı karşıya olduğu bir dönemde büyük önem taşıyor. Geleneksel yöntemlerle bu dilleri dijitalleştirmek yeterli veri eksikliği nedeniyle zorken, yeni multimodal öğrenme yaklaşımı umut verici sonuçlar gösteriyor. Teknoloji, diller arası aktarım öğrenmesi sayesinde daha verimli çalışabiliyor ve dikkat mekanizmalarını analiz ederek hangi katmanlarda ses ile metin arasında tercih yaptığını ortaya koyuyor.

arXiv (CS + AI) 0