Büyük dil modelleri tüm bilgileri tek boyutlu metin dizileri halinde işler, ancak bu yaklaşım iki boyutlu yapıları gerektiren görevlerde sorunlara yol açıyor. Araştırmacılar matris transpoz, Conway'in Yaşam Oyunu ve LU ayrıştırması gibi 2D yapı gerektiren görevlerde bu 'serileştirme sürtünmesi' sorununu inceledi. Çalışmada aynı içeriği hem metin hem de görsel olarak işleyen iki farklı sistem karşılaştırıldı. Sonuçlar, görsel yolun tutarlı bir şekilde daha başarılı olduğunu gösteriyor. Bu bulgular, yapay zeka modellerinin farklı veri türlerini nasıl işlediğini ve görsel bilginin önemini anlamamız açısından kritik.

arXiv — Hesaplamalı Dilbilim (cs.CL) 0

Teknoloji & Yapay Zeka

16 Apr

Büyük Dil Modelleri Spektrum Yönetimini Devrimleştiriyor

Araştırmacılar, kablosuz ağlardaki spektrum yönetimi sorununu büyük dil modelleri (LLM) kullanarak çözmeye yönelik yeni bir yaklaşım geliştirdi. Geleneksel optimizasyon yöntemlerinin büyük ölçekli ağlarda yetersiz kaldığı durumlarda, LLM tabanlı sistem başarıyla spektrum erişimini optimize ediyor. Sistem, hiyerarşik durum serileştirme mekanizması sayesinde küresel çevre istatistikleri ile yerel kısıtları harmanlayarak, LLM'nin sınırlı bağlam penceresi içinde yüksek boyutlu akıl yürütme yapmasını sağlıyor. Araştırma, kod tabanlı paradigmanın soğuk başlatma darboğazını ortadan kaldırdığını ve doğrudan yürütme geri bildirimi ile üstün ölçekleme yasalarına ulaştığını gösteriyor.

arXiv (CS + AI) 0