Epoch AI tarafından gerçekleştirilen bir araştırma, mevccut AI metin detektörlerinin temel bir zayıflığını gözler önüne serdi. Pangram, GPTZero ve Originality.ai gibi yaygın olarak kullanılan üç detektör, dil modelleri tarafından yazarın stiline uyarlanmış metinleri algılamakta başarısız kalıyor. Çalışma sonuçlarına göre, stil taklidinin uygulandığı AI-üretim metinlerin yüzde 18'e kadarı hiç tespit edilmiyor.
Sorun özellikle bilimsel yazılarda daha kritik hale geliyor. Bu tür metinlerde detektörlerin başarısızlık oranı yüzde 48'e ulaşıyor. Bu bulgu, gerçek dünyada akademik ve araştırma bağlamında bu algılayıcıların en sık kullanıldığı alanlar olduğu düşünüldüğünde endişe verici bir sonuç.
Araştırma, mevcut tespit teknolojilerinin dil modelleri tarafından hedef yazarın dilsel özellikleri ve tarzı taklit edildiğinde sağlam olmadığını gösteriyor. Bu bulgular, AI-üretim içeriği tespit etmeye yönelik mevcut çözümlerin yetersizliğini ve geliştirilmesi gereken yönlerini açık biçimde ortaya koymaktadır.
