Yapay zeka alanında müzik eşliğinde dans hareketleri üretme konusunda önemli bir gelişme yaşandı. Araştırmacılar, müziğin yanı sıra metin komutlarıyla da kontrol edilebilen dans koreografisi sistemi TeMuDance'i geliştirdi.
Mevcut müzik odaklı dans üretim sistemleri gerçekçi hareketler yaratabilse de, kullanıcıların doğal dille belirli hareketleri yönlendirmesi mümkün değildi. Bu sınırlama, müzik-metin-hareket verilerini bir arada içeren büyük ölçekli veri setlerinin bulunmamasından kaynaklanıyordu.
TeMuDance, bu sorunu yaratıcı bir yaklaşımla çözüyor. Sistem, hareket verilerini ortak bir köprü olarak kullanarak, ayrı müzik-dans ve metin-hareket veri setlerini birleştiriyor. Bu sayede manuel etiketleme gerektirmeden, farklı veri türlerini tek bir öğrenme ortamında buluşturuyor.
Sistemin çalışma prensibi, hareket verilerini merkeze alan bir yaklaşıma dayanıyor. Farklı modaliteler arasında eksik bağlantıları kurarak, uçtan uca eğitim sürecini mümkün kılıyor. Bu sayede kullanıcılar 'yavaş ve akıcı' veya 'enerjik sıçrayışlar' gibi açıklamalarla dans stilini yönlendirebiliyor.
Bu teknoloji, video oyunu endüstrisi, animasyon filmleri ve sanal gerçeklik uygulamaları için otomatik koreografi üretiminde yeni olanaklar sunuyor. Aynı zamanda dans eğitimi ve sanatsal yaratım süreçlerinde de kullanılabilir.