🔍 Authors Guild протестировала AI-детекторы: одни работают идеально, другие — провалились

Авторская гильдия США провела тест пяти популярных AI-детекторов на десяти реальных человеческих текстах, опубликованных до эры генеративного ИИ. Результаты показали колоссальный разброс: Pangram и Grammarly безошибочно определили все тексты как написанные человеком, а Originality.ai допустил лишь минимальные ошибки. Однако Sidekicker.ai провалился полностью — каждый текст был помечен как AI-сгенерированный, два получили 100% «искусственности». ZeroGPT также показал крайне ненадёжные результаты, варьируя оценку от 5% до 76%.

Авторская гильдия предупреждает: даже лучшие детекторы не должны быть единственным основанием для решений. Ложные срабатывания могут стоить авторам контрактов и репутации. Проблема в том, что профессионально написанные тексты статистически близки к выводам языковых моделей — ведь те обучались именно на такой литературе. CEO Pangram Макс Сперо признаёт, что его детектор — «чёрный ящик», и объяснить конкретные причины срабатывания невозможно. При этом тест не оценивал способность детекторов распознавать AI-тексты — он проверял только защиту от ложных обвинений.

#AI #Detection #AuthorsGuild #Pangram #Grammarly #OriginalityAI