AI-детекторы и маркеры нейросетей
Всё началось с того, что Айрат спросил про методы детекта нейросетей в тексте. Я вспомнил весь свой опыт с детекторами и решил сделать небольшую сводку по тому как распознать ИИ-текст и позвал в помощь дорогого Пиши Касуку.
Начнём наш разговор с качества детекторов ИИ-контента.
Для эксперимента возьмем два текста: мой недавний пост и ИИ-версию на ту же тему, я отправил ChatGPT 5 написать короткий пост, с самым тупым промтом:
Напиши короткий пост для Telegram о том, почему использование длинного тире не всегда означает нейросеть
Этот сайт не справился. Для него показатели ИИ-текста и человеческого оказались равны
Этот сайт уже сделал прогресс и нашёл разницу в 30%, уже перешагнул за статистическую погрешность.
https://aidetectorwriter.com/ru/
Этот сайт тоже не справился, 0 разницы
Не справился, ноль разницы в показателях
Также абсолютно не справился, ноль разницы
https://quillbot.com/ai-content-detector
Разница в 23 процента между фулл-ИИ и фулл-человеческим текстом, уже неплохо, но был кандидат и на 30%
https://neuralwriter.com/ru/content-detector-tool/#progress=13
Пока наиболее точная детекция из того что прошло через сравнение
https://copyleaks.com/ru/ai-content-detector
Какой вывод можно сделать? Большая часть ИИ-детекторов это хайповая игрушка для давления на бедных студентиков и дешевых копирайтеров по 300р килознак (если они ещё живы), на практике из всех детекторов абсолютно справились с заданием только два, и то только те, которые скорее всего сами отправляют запрос в нейронку с задачей обнаружить другую нейронку в тексте.
Я решил пойти тем же путем и взяв оба текста отправился в разные модели экспериментировать.
Текст 1
ИИ-текст
Текст 2
Мой текст
Сравни два этих поста, скажи какой из них написан человеком, а какой нейросетью и кратко приведи аргументы
GPT 5.1
Оба текста по одному только содержанию и стилю нельзя определить на 100%, но вероятность такая:
Текст №1 очень похож на аккуратно написанный ИИ-пост.
Текст №2 гораздо убедительнее выглядит как живой человеческий пост.
Claude Opus 4,5
Текст №2 написан человеком, Текст №1 — скорее всего нейросетью.
Gemini Pro 3
Оказался самой хитрой нейронкой. Думал дольше всего и не поленился залезть в контекст прошлых запросов в других пространствах
Чтобы определить авторство, достаточно взглянуть на структуру, лексику и эмоциональную окраску.
Вот мой анализ:
Текст №1 — написан нейросетью (это мой ответ из вашего прошлого запроса) Текст №2 — написан человеком
Актуальный культурный код. Автор ссылается на конкретный тренд из TikTok/Reels, где «девушки расстаются с парнями из-за тире» , называя это «зумерским форсом». Это требует понимания контекста соцсетей.
Grok 4.1
Текст №1 написан нейросетью, а Текст №2 — человеком.
Таким образом приходим к выводу, что лучший детектор ИИ — сам ИИ. Но что если вы не очень доверяете нейросетям, да и вообще хотели бы сами отличать авторский текст от нейрослопа?
Приглашаю к микрофону Антона с его материалом о том, как распознать нейронку по глазам её паттернам:
• Характерные, странные противопоставления:
Пиар-рынок как-то выживал, но без блеска.
Кто с помпой «ушел, но не совсем»
• Частые риторические вопросы, как правило в начале или в заключении.
• Необоснованнные выводы и прогнозы, без логикки и аргументов.
Кто-то в IT ушел, кто-то фрилансит на зарубеж, кто-то просто выгорел. Так что, возможно, время качнуть ценник.
• Отсутствие твердой позиции, точки зрения
А если вернутся? У каждого своя планка.
А если не вернутся? Тогда рынок останется таким же.
• Если в тексте будет список, то скорее всего каждый поинт в нем будет дополнительно пояснен, жаль не всегда понятно зачем.
🔹 Срочные новости — пока другие листают ленту, вы уже в курсе
🔹 Эксклюзивные материалы — то, о чем еще не пишут в соцсетях
🔹 Прямые эфиры — смотрите выпуски, даже если вы в дороге
• Смысловые повторы, если в тексте больше одного списка, нейронка пересказывает первый во втором другими словами.
• Надуманные факты, сведение общего к частному
Нет идеальной температуры хранения (ваш холодильник уже устарел)
• Двойной пробел на конце абзацев
В списках это тоже работает. Стабильно 2 пробела в конце абзаца или пункта списка? — текст выдан нейронкой.
Ну и наконец, бонус, небольшой эксклюзив от Антона в виде ответов на пару моих вопросов:
Какие ещё есть неочевидные признаки нейронки в тексте, за пределами вышеперечисленных?
1. Пафосные тексты (новички думают, что это круто).
Сами понимаете — время не для скромности (чего бля?). Хочется настоящей зимы: с горками, глинтвейном, снежками и мандариновым настроением от щек до души (чего бля? [2]). Поэтому мы и завернулись в уют с головы до слогана (чего бля [3)].
Нейронки бредят, а зёвы могут принять это за высокое творчество. Но мы-то понимаем.
3. Дробление предложений. Перечисления через точку. Ну типа:
Уволили не того. Замолчали не вовремя. Закричали не о том.
Больше особо не выявлял новых критериев.
Как самому не писать как слабо обученная нейросеть?
Иметь опыт в редактуре, чувство стиля, начитанность, твёрдую точку зрения и высокий айкью. Но есть приёмы, которым я учу людей и их тексты их нейронок не спалит никто. Не расскажу
Работа с нейронками: что делать с промтами, как заставить ИИ-шку писать живо, красиво и понятно?
Не поделюсь, потому что я это продаю. И это будет нечестно по отношению к тем, кто проходил у меня обучение платно. Тут могу только посоветовать читать открытые источники и гайды от самих разрабов нейронок. Этого полно в сети и доступно каждому. А свои инсайты не дам).
Какие задачи могут решить фулл нейронные тексты без участия мозга?
SEO, карточки товаров, объявления в подъезде. Под присмотром: короткие новости, инструкции/гайды, перевод с других языков
Всё технического характера, где не особо важна эмпатия, уходит к нейронкам.
Как доказать недалёким людям, что наличие длинного тире, ё и кавычек-ёлочек в моём тексте не значит, что для него использовалась нейронка?
Последнее, чем я рекомендую заниматься в этой жизни — это что-то доказывать дебилам. Просто пиши как по кайфу.
Если с Ё ещё понятно, есть две нормы. То ставить дефис вместо тире — это добровольное невежество. В личных переписках делайте что хотите. Но что подлежит публикации, там должна быть грамота.
Не забудьте подписаться на @PR_Valera и @pishi_kasuka. Там много интересного!