Modern üretim tesislerinde insan ve robotların etkin işbirliği, yüksek verimlilik için kritik öneme sahip. Ancak dinamik ve karmaşık üretim ortamlarında görev planlama ve dağıtım süreci oldukça zorlu bir problem teşkil ediyor. Bu soruna çözüm getirmek üzere araştırmacılar, mekânsal bilgileri akıllıca işleyen yenilikçi bir algoritma geliştirdi.
Sistemin en önemli özelliği, çalışanların anlık konumlarını ve görevleri tamamlamak için kat etmeleri gereken mesafeleri gerçek zamanlı olarak hesaba katması. Bu yaklaşım, geleneksel görev dağıtım sistemlerinden farklı olarak, fiziksel mekânın dinamiklerini algoritmanın merkezine yerleştiriyor.
Geliştirilen hiyerarşik sistem iki seviyeli bir yapıda çalışıyor. Üst seviyedeki ajan, karmaşık üretim süreçlerini yönetilebilir alt görevlere bölerek genel planlamayı gerçekleştirirken, alt seviyedeki ajan bu görevlerin insan ve robotlar arasında optimal dağıtımını sağlıyor.
Algoritmanın kalbi olan EBQ (Etkin Tampon-tabanlı Derin Q-öğrenme) yöntemi, özellikle uzun vadeli ve seyrek ödüllü üretim problemlerinde çığır açıyor. Bu yöntem, hem eğitim süresini dramatik şekilde kısaltıyor hem de sistem performansını kayda değer ölçüde artırıyor.
Bu teknolojik gelişme, Endüstri 4.0'ın hedeflediği akıllı üretim sistemlerinin gerçekleştirilmesinde önemli bir adım olarak değerlendiriliyor.