Нейродетектор Bothub: проверка обещаний по выявлению «ленивого» копирайтера

Что такое нейродетектор?

Bothub анонсировал нейродетектор – сервис, который, по заявлению компании, способен «поймать» тексты, написанные «ленивым» копирайтером. По их описанию, модель фиксирует такие признаки, как избыточные длинные тире (—), чрезмерно идеальная пунктуация и стилистическая «чистота», характерные для быстро сгенерированных материалов.

Как проверяли работу?

Автор статьи на Habr AI провёл серию экспериментов, предоставив нейродетектору несколько вариантов текста:

1. Исходный материал – обычный человеческий текст без особых стилистических «ошибок».\
2. Текст с искусственно добавленными длинными тире – каждый второй абзац содержит тире.\
3. Сверхчистый редакционный вариант – полностью отшлифованный, без опечаток и стилистических «изъянов».\
4. AI‑сгенерированный контент (ChatGPT‑4) с типичными паттернами генерации.

Каждый вариант был пропущен через нейродетектор, а результаты сравнивались с ожидаемыми метками.

Что показали результаты?

• Для исходного материала нейродетектор выдал нейтральный балл (0.12 из 1), что соответствует «человеческому» уровню.
• При добавлении длинных тире показатель резко вырос до 0.78, сигнализируя о «подозрительном» тексте.
• Сверхчистый редакционный вариант получил 0.65, что подтверждает чувствительность к избыточной «идеальности».
• AI‑текст получил 0.54, ниже, чем у специально «искажённого» варианта, но всё же выше базового уровня.

Таким образом, нейродетектор действительно реагирует на заявленные признаки, однако его способность различать искусственный и человеческий контент остаётся ограниченной.

Где подробнее?

Полный разбор доступен в статье Habr AI: https://habr.com/ru/companies/bothub/articles/1075410/