Yarı yapılandırılmış iş belgelerinden bilgi çıkarma, işletme yönetiminde kritik bir zorluk olmaya devam ediyor. Yeni bir araştırma, genel amaçlı büyük dil modellerinin bu alanda ne kadar etkili olabileceğini ortaya koyuyor.
Araştırmacılar, İspanyol elektrik faturalarından yapılandırılmış bilgi çıkarma konusunda iki farklı yapay zeka modelini test ettiler: Gemini 1.5 Pro ve Mistral-small. IDSEM veri setinin bir alt kümesini kullanarak gerçekleştirilen deneylerde, 19 farklı parametre konfigürasyonu ve 6 farklı komut stratejisi karşılaştırıldı.
Çalışmanın en dikkat çekici bulgusu, komut kalitesinin model ayarlarından çok daha kritik olduğunun anlaşılması oldu. Tüm parametre konfigürasyonları arasındaki F1-skor farkı minimum kalırken, temel zero-shot yaklaşım ile en iyi few-shot stratejisi arasında yüzde 19'u aşan bir performans farkı gözlemlendi.
Bu sonuçlar, işletmelerin fatura işleme süreçlerini otomatikleştirmede önemli fırsatlar sunuyor. Özel eğitim gerektirmeden, doğru komut stratejileriyle yapay zeka modellerinin yarı yapılandırılmış belgelerden güvenilir şekilde bilgi çıkarabileceği kanıtlandı.
Araştırma, doğal dil işleme alanında komut mühendisliğinin önemini bir kez daha vurgularken, işletmelerin belge işleme iş akışlarını modernize etmelerinde pratik çözümler de sunuyor.