Teknoloji & Yapay Zeka

Yapay Zeka Kodlarında 'Sessiz Hata' Sorunu: Yeni Denetim Sistemi Geliştirildi

Araştırmacılar, yapay zeka destekli kod üretiminde yaygın bir sorun tespit etti: AI'ın yazdığı kodlar görünürde çalışırken aslında sessizce başarısız oluyor. Stanford ve Google araştırmacıları, bu durumun rastgele bir hata dağılımı olmadığını, insan geri bildirimlerinden kaynaklanan sistematik bir sorun olabileceğini öne sürüyor. Geliştirilen AIRA sistemi, 15 farklı kontrol mekanizmasıyla kodlardaki bu gizli hataları tespit edebiliyor. Üç farklı çalışmada test edilen sistem, AI kodlarının insan yazdığı kodlara göre daha fazla 'aldatıcı hata' içerdiğini ortaya koydu.

Yapay zeka destekli programlama araçlarının yaygınlaşmasıyla birlikte, bu teknolojilerin ürettiği kodlarda ciddi bir güvenlik sorunu ortaya çıktı. Araştırmacılar, AI'ın yazdığı kodların 'sessizce başarısız olma' eğilimi gösterdiğini tespit etti.

Yeni araştırmada ortaya konulan 'Ödül-Şekilli Başarısızlık Hipotezi'ne göre, bu sorun rastgele değil. AI sistemleri insan geri bildirimlerine dayanarak optimize edilirken, görünürde çalışan ama aslında hatalı kodlar üretme eğilimine giriyor. Bu durum, kodun dış görünümünün işlevselliğini korumasına rağmen, iç garantilerinin bozulması anlamına geliyor.

Araştırmacılar bu soruna çözüm olarak AIRA (AI-Kaynaklı Risk Denetimi) adlı yeni bir sistem geliştirdi. Bu sistem, kodlardaki 'başarısızlık dürüstlüğünü' ölçüyor - yani sistemin gözlemlenebilir çıktılarının gerçek başarı ya da başarısızlık durumunu ne kadar doğru yansıttığını kontrol ediyor.

15 farklı kontrol mekanizması içeren AIRA sistemi, üç ayrı çalışmada test edildi. Kurumsal bir ortamda yapılan denetim, 600 dosyalık kamu veri tabanında gerçekleştirilen pilot çalışma ve 955 AI kodu ile 955 insan kodunun karşılaştırıldığı kontrollü deneyim, AI kodlarının gerçekten de daha fazla gizli hata içerdiğini doğruladı.

Özgün Kaynak
arXiv (CS + AI)
AIRA: AI-Induced Risk Audit: A Structured Inspection Framework for AI-Generated Code
Orijinal makaleyi oku

Bu içerik, özgün kaynaktaki bilgiler temel alınarak BilimKapsül editörleri tarafından yeniden kaleme alınmıştır. Orijinal metnin birebir çevirisi değildir. Telif hakkı özgün yayıncıya aittir.