📝 ИИ-тексты можно отследить до источника по редким фразам

Исследователи из Stony Brook University использовали движок infini-gram от Allen Institute for AI (AI2), чтобы находить в сгенерированном тексте характерные выражения, которые дословно повторяют уже существующие источники. Метод основан на поиске редких n-грамм — коротких фраз, которые редко встречаются в обычном языке, но могут быть заимствованы моделью из обучающих данных.

Команда проанализировала книги из Amazon с существенной долей ИИ-сгенерированного текста. Оказалось, что такие книги, особенно популярные в сегменте самиздата, заметно чаще пересекаются с редкой лексикой из ранее опубликованных произведений, чем обычные тексты. Это позволяет не только выявлять следы ИИ, но и указывать на конкретные источники, которые модель могла использовать при генерации. Подход работает как своего рода детектор «литературных отпечатков»: чем необычнее совпадение, тем выше вероятность машинного происхождения.

Практически это открывает новый способ проверки текстов на ИИ-следы и может быть полезно издателям, платформам и исследователям, которые хотят отличать оригинальные работы от массово сгенерированного контента.

#AI #Research #Literature #AI2 #InfiniGram #Rewrite