Чат-боты превзошли специализированные детекторы ИИ-контента

Специализированные сервисы для определения AI-сгенерированного текста постепенно уступают место обычным чат-ботам. Последние тесты показывают, что ChatGPT и аналогичные инструменты справляются с этой задачей не хуже, а иногда даже лучше узкоспециализированных решений.

Эволюция детекторов: от 66% к совершенству и обратно

За два года тестирования AI-детекторов автор исследования наблюдал интересную динамику: если в начале 2023 года лучший результат составлял 66% точности, то к февралю 2025-го три детектора показывали стопроцентный результат. Однако к октябрю качество снова снизилось — лишь три инструмента сохранили идеальные показатели.

Одновременно с ухудшением качества многие сервисы ввели ограничения на бесплатное использование, что делает их менее доступными для широкой аудитории.

Методология тестирования

Для объективной оценки использовались пять текстовых блоков: два написанных человеком и три сгенерированных ChatGPT. Каждый детектор анализировал блоки отдельно, при этом результат выше 70% считался уверенным определением авторства.

Тестирование охватило 11 различных детекторов, включая BrandWell, Copyleaks и другие популярные решения. Всего было проведено 55 отдельных проверок.

Сами AI-системы становятся лучшими детекторами собственных творений. Это напоминает историю с антивирусами, которые десятилетиями боролись с вирусами, созданными теми же программистами. Кажется, индустрия детектирования AI-контента повторяет этот путь — сначала появляются специализированные решения, а затем оказывается, что базовые инструменты справляются не хуже.

Ключевые выводы исследования

• Использование AI для написания текстов без указания авторства соответствует определению плагиата
• Специализированные детекторы демонстрируют нестабильное качество работы
• Обычные чат-боты показывают сравнимую или лучшую эффективность
• Качество детекторов ухудшилось за последние полгода

Почему чат-боты эффективнее

Чат-боты, обученные на огромных массивах текстов, включая AI-генерированный контент, обладают более глубоким пониманием языковых паттернов. Они могут анализировать стилистические особенности, структуру предложений и другие тонкие признаки, которые ускользают от специализированных детекторов.

Более того, многие пользователи уже имеют доступ к ChatGPT и другим подобным инструментам, что делает их удобной альтернативой платным сервисам детектирования.

Будущее детекции AI-контента

Тенденция указывает на то, что специализированные детекторы могут стать нишевым продуктом, в то время как основные платформы AI будут включать функции проверки авторства в свои базовые возможности. Это соответствует общей логике развития технологий, когда узкоспециализированные инструменты поглощаются более универсальными платформами.

Сообщает ZDNet.