Тест трех сервисов проверки текстов на написание ИИ - ChatGPT и аналогами
Решил протестировать сервисы для проверки, кем написан текст - человеком или ChatGPT / роботом / искусственным интеллектом.
- https://platform.openai.com/ai-text-classifier - понадобится аккаунт в OpenAI
Вставляем текст в форму (минимум 1000 символов), жмем Submit, смотрим результат. Например:
- The classifier considers the text to be possibly AI-generated. - возможно сгенерированный текст
-
The classifier considers the text to be unlikely AI-generated. - вряд ли текст сгенерирован ИИ
На текст с сайта комсомолки сервис сообщил, что текст возможно сгенерирован. А на текст, который я создал в ChatGPT, но потом отредактировал, вердикт был - unlikely (вряд ли).
В общем, точность сервиса далеко не 100%.
Здест результат вывожит в виде вероятностей. Лучший результат для текст, которые я проверял, был Real 42.20%, Fake 57.80%.
- Статья комсомолки - 62% Human.
- Статьи, которую писал полностью я (то есть Human :) - 56% и 13% Human.
- Текст из ChatGPT - 15%.
Вывод: если у текста высокая оценка человечности, то скорее всего текст действительно написан челвоеком. Если низкая - 50/50.
Ввод: узнать наверняка, кто создал текст, пока нету возможности.