Grok AI утверждает, что его не видят AI-детекторы. Недавнее исследование показало неожиданные результаты! Сможете ли вы определить, создан ли этот контент с помощью AI?
В этом кратком анализе рассматривается, можно ли обнаружить текст, созданный Grok 4, с помощью ведущих AI-детекторов или он останется незамеченным.
Ключевые выводы (кратко):
Действительно, контент Grok 4 можно распознать с идеальной точностью с помощью высокоточного Bypass Engine AI Checker — это подтверждают первые тесты на примерах текста Grok 4.
- Grok 4 был запущен 10 июля 2025 года (дополнительную статистику о Grok можно посмотреть здесь).
- По результатам быстрого теста образцов контента Grok 4:
- Два AI-детектора каждый раз распознавали контент, созданный Grok 4, — Bypass Engine AI Detector и GPTZero.
- Два других детектора, ZeroGPT и Grammarly, показали более низкий результат — всего 40% точности.
- В нашем подробном обзоре точности Originality продемонстрировал способность обнаруживать текст, созданный Grok 3, с надёжностью 99,9%.
Здесь мы подробнее рассмотрим модель Grok AI и оценим, насколько хорошо инструмент обнаружения контента AI распознаёт тексты, написанные с помощью AI.
Методика:
Сначала Grok 4 сформулировал десять запросов, направленных на создание текста, который потенциально мог бы обойти AI-детекторы (как показано на изображении ниже).
Затем Grok 4 сгенерировал десять образцов текста.
Каждый из десяти образцов был проверен с помощью четырёх разных инструментов обнаружения AI:
- Bypass Engine AI Detector
- GPTZero
- ZeroGPT
- Grammarly
Анализ:
Каждый ответ Grok проверили с помощью четырёх AI-детекторов и зафиксировали оценку AI для каждого из них.
На изображении выше неправильные ответы выделены красным.
Детектор ИИ Bypass Engine:
Bypass Engine показал выдающиеся результаты, точно определив все 10 образцов текста Grok как созданные ИИ.
В итоге точность Bypass Engine при обнаружении текста Grok 4, созданного ИИ, составила 100%.
GPTZero
Как и Originality.ai, GPTZero точно распознал все 10 образцов как созданные ИИ.
Читайте подробный обзор GPTZero здесь.
ZeroGPT
ZeroGPT показал слабый результат: он правильно определил как созданные ИИ только 40% образцов Grok 4.
Читайте обзор ZeroGPT здесь.
Детектор ИИ Grammarly
Детектор ИИ от Grammarly показал слабый результат, распознав как созданные ИИ лишь 40% образцов Grok 4.
Читайте обзор детектора ИИ Grammarly.
Распознавание Grok 3
После исследования точности обнаружения ИИ для новейшей модели Bypass Engine мы получили следующие результаты обнаружения Grok 3:
Мы создали и опубликовали инструмент для исследования детекторов ИИ. Исследователи могут легко использовать его, чтобы проверить, насколько хорошо детекторы ИИ работают с определённым набором данных.
Итоги
Результаты показывают, что текст Grok 3 и Grok 4, созданный ИИ, могут распознавать ведущие детекторы ИИ, например AI Checker от Bypass Engine.
Однако некоторым другим детекторам ИИ сложно их распознать.
Каждый раз, когда выходит новая модель LLM, например Grok 4, мы проверяем, насколько хорошо работает наш детектор ИИ. Обычно точность немного снижается, но затем повышается, когда модели обнаружения обучаются на контенте новой LLM.
Проверить точность довольно просто. Чтобы оценить качество детектора ИИ, используйте матрицу ошибок и F1-меру. Это лучшие методы (подробнее о тестировании обнаружения ИИ читайте в нашем исследовании).
F1-мера помогает свести матрицу ошибок к одному числу. Ознакомьтесь с нашим инструментом тестирования с открытым исходным кодом и следуйте инструкциям, чтобы лучше разобраться. Это исследование показывает, почему такие тесты важны: они помогают нам обсуждать прозрачность ИИ. Так мы можем вместе продолжать учиться и совершенствоваться.
Если вы хотите провести собственное исследование, сообщите нам. Мы с радостью предоставим кредиты на исследования.
Мы также ищем участников для нашего благотворительного челленджа по тестированию детекторов ИИ. Если вам интересно, свяжитесь с нами.
Дальнейшее изучение
Узнайте больше об обнаружении ИИ и точности таких проверок:
- Обзор точности детекторов ИИ-контента
- Комплексный анализ исследований точности обнаружения ИИ
- Сходство DeepSeek с ChatGPT: изучаем возможности обнаружения
- Исследование возможностей обнаружения контента Claude 4 Sonnet и Opus
- Оценка возможностей обнаружения контента GPT-4.1
