Deepfake teknolojilerinin yaygınlaşmasıyla birlikte, sahte yüz görüntülerini tespit etme konusunda yeni yaklaşımlar geliştirilmeye devam ediyor. Araştırmacılar, CLIP yapay zeka modelini kullanarak sahte yüz tespitinde çığır açan bir yöntem geliştirdi.
Geleneksel yaklaşımlar genellikle CLIP modelinin görsel kodlayıcı özelliklerine odaklanırken, bu yeni araştırma metin modalitesinin gücünden yararlanıyor. Separable Prompt Learning (SePL) adı verilen teknik, metin talimatlarının deepfake tespitinde nasıl kullanılabileceğini gösteriyor.
SePL yönteminin temel prensibi, görüntülerdeki sahtelik ile ilgili bilgileri, gerçek içerikten ayırmaktır. Bu ayrıştırma işlemi, iki farklı tip prompt öğrenme stratejisi kullanılarak gerçekleştiriliyor. Sistem, sahtelik belirtilerini vurgulayarak tespit performansını artırıyor.
Araştırmacılar, bu ayrıştırma işlemini başarmak için çok modaliteli hizalama stratejisi ve özel tasarlanmış hedefler geliştirdi. Bu yaklaşım, CLIP'in büyük ölçekli ön eğitimden kazandığı görsel bilgiyi metin talimatlarıyla birleştirerek daha etkili deepfake tespit sistemi oluşturuyor.
Bu gelişme, sosyal medya platformlarından güvenlik uygulamalarına kadar geniş bir yelpazede sahte içerik tespiti için umut vaat ediyor.