С момента своего запуска ChatGPT от OpenAI стал проблемой для образовательных учреждений по всему миру, поскольку студенты начали использовать его для написания эссе и списывания оценок. Учитывая, насколько естественно выглядит текст, сгенерированный чат-ботом, преподавателям сложнее определить, является ли работа студентов оригинальной.

Чтобы помочь учителям оценивать задания учащихся, выпускник информатики разработал GPTZero, инструмент проверки искусственного интеллекта, который определяет, был ли текст сгенерирован искусственно.

Все это звучит очень хорошо, но может ли GPTZero обнаружить контент, созданный искусственным интеллектом, и насколько это точно?

Что такое GPTZero и как он работает?

GPTZero — это инструмент для анализа текста с искусственным интеллектом, разработанный Эдвардом Тианом, выпускником компьютерных наук, чтобы помочь преподавателям отличить плагиатный текст от оригинальной работы. Инструмент проверяет запутанность и разрывность текста, чтобы определить, создан ли он искусственно или создан человеком.

Не вдаваясь в подробности, давайте посмотрим, что означают эти термины:

Перплексия измеряет случайность текста в обработке естественного языка (NLP). Текст, написанный человеком, имеет тенденцию быть менее структурированным и более непредсказуемым, поэтому его значение недоумения должно быть выше. Напротив, текст, сгенерированный ИИ, должен иметь низкий показатель запутанности. Пакетность учитывает другие переменные, не учтенные в недоумении, для улучшения анализа текста. Этот термин относится к появлению необычных предметов в случайных группах. Текст, созданный искусственным интеллектом, имеет более последовательную структуру, чем текст, написанный людьми. Взрывность помогает нам это определить.

GPTZero Classic находится в публичном доступе с начала 2023 года и бесплатна для использования. Однако в бесплатной версии ограничение на количество символов составляет 5000 символов на документ, и вы можете анализировать пакетно только три документа одновременно.

GPTZero предлагает три премиум-версии для удовлетворения потребностей пользователей, желающих анализировать миллионы слов ежемесячно: Essential (по цене 10 долларов США в месяц), Premium (по цене 16 долларов США в месяц) и Professional (по цене 23 доллара США). помесячно). Ограничение количества символов на документ в премиум-версиях выше, чем в бесплатной, и, помимо других преимуществ, они позволяют выполнять больше сканирований в час.

Чтобы подписаться на эти премиум-версии, выполните следующие действия:

Перейдите на веб-сайт GPTZero. Нажмите вкладку «Панель мониторинга» в правом верхнем углу страницы. Войдите в свою существующую учетную запись или создайте новую учетную запись. После входа в систему вы можете сравнить доступные планы и перейти на тот, который лучше всего соответствует вашим потребностям.

Альтернативно, находясь на домашней странице GPTZero, нажмите кнопку «Обновить» в нижней части текстового поля, чтобы просмотреть, сравните и купите платный план.

Как использовать GPTZero для обнаружения текста, сгенерированного искусственным интеллектом

В отличие от ChatGPT, на GPTZero регистрация не требуется. Вы можете получить доступ к инструменту через веб-сайт.

Перейдите в GPTZero. Скопируйте и вставьте текст, который хотите проанализировать, в поле или загрузите файл. Нажмите кнопку «Проверить происхождение».

По завершении сканирования GPTZero сообщит вам, был ли текст написан человеком или сгенерирован искусственным интеллектом.

Как использовать расширение Origin GPTZero для обнаружения текста, сгенерированного искусственным интеллектом.

Загрузив бесплатное расширение Origin GPTZero в браузер Chrome, вы можете сканировать целые веб-страницы и документы Google на предмет текста, сгенерированного искусственным интеллектом. Эта новая функция упрощает процесс проверки информации онлайн.

Перейдите на страницу расширения Origin в Интернет-магазине Chrome. Нажмите «Добавить в Chrome», чтобы загрузить расширение. Затем подтвердите установку, чтобы продолжить. После установки расширения вы можете войти в систему, используя свою учетную запись Google, или создать новую учетную запись. Чтобы отсканировать веб-страницу или документ Google, нажмите кнопку «Происхождение» на экране и выберите «Сканировать всю страницу».

Теперь вы сможете просмотреть результаты и определить, был ли контент написан человеком или сгенерирован. по ИИ.

Использование GPTZero для анализа вашего письма

Особенность, которая отличает GPTZero от нескольких других инструментов обнаружения искусственного интеллекта, заключается в том, что он может анализировать ваши шаблоны письма. Платформа предлагает историю сканирования, которую вы можете использовать для просмотра любого фрагмента текста, отсканированного с помощью этого инструмента.

Более того, нажав на конкретный результат поиска, можно получить более подробные данные о вашем письме. По сути, вы сможете понять, почему ваше письмо было признано созданным человеком или искусственным интеллектом.

Так, например, если GPTZero пометил что-то, что вы написали, как созданное искусственным интеллектом, доступ к анализу письма покажет вам причины этого, например, что контент имел низкую запутанность и высокую пульсацию. Вы можете исправить эти проблемы, чтобы улучшить качество, читаемость и подлинность вашего контента.

Может ли GPTZero правильно распознавать текст, сгенерированный искусственным интеллектом?

Чтобы проверить, насколько точно GPTZero обнаруживает текст, сгенерированный ИИ, мы проанализируем три текста в инструменте: текст, сгенерированный ИИ, текст, написанный человеком, и текст, сгенерированный ИИ, который был перефразирован другим инструментом. Давайте посмотрим, как GPTZero реагирует на каждый ввод.

1. Анализ текста, сгенерированного искусственным интеллектом, в GPTZero

Чтобы проанализировать текст, сгенерированный искусственным интеллектом, давайте сначала сгенерируем текст с помощью ChatGPT, чат-бота с искусственным интеллектом, работающего на основе технологии GPT. Для этого выполните следующие действия:

Перейдите в OpenAI. Нажмите кнопку «Попробовать ChatGPT». Войдите или зарегистрируйтесь, чтобы создать учетную запись. Введите любое приглашение, чтобы сгенерировать фрагмент текста. Скопируйте текст, сгенерированный инструментом, после его завершения. Проанализируйте текст в GPTZero, как мы объясняли ранее.

Когда мы провели этот тест, GPTZero дал неоднозначные результаты на ряд текстов, написанных искусственным интеллектом. Иногда он никак не мог определить, что текст был сгенерирован ИИ, а иногда правильно предполагал, что большая часть текста была создана ИИ.

Вы также можете использовать другие инструменты написания искусственного интеллекта для создания текста, который хотите проанализировать.

2. Анализ перефразированного текста, сгенерированного искусственным интеллектом, в GPTZero

Для перефразирования текста вы можете выбирать из сотен инструментов перефразирования. В данном случае мы использовали Scribbr. Если вы хотите использовать тот же инструмент, выполните следующие действия:

Перейдите в Scribbr. Скопируйте сгенерированный искусственным интеллектом текст, который мы ранее проанализировали в GPTZero, и вставьте его в инструмент. Нажмите кнопку «Перефразировать». Позвольте Scribbr перефразировать текст за вас. После перефразирования запустите тест GPTZero еще раз.

Мы обнаружили, что из-за небольшого перефразирования GPTZero немного сложнее определить, был ли текст сгенерирован искусственным интеллектом, но в целом все было неоднозначно. Я бы также добавил, что перефразированный вывод был ужасного качества. Текст слева был оригиналом, а текст справа — перефразированной версией.

3. Анализ написанного человеком контента в GPTZero

В некоторых случаях такие инструменты, как GPTZero, возвращают ложноположительный результат, то есть они считают что-то неправильным, когда это нет. Чтобы определить, дает ли GPTZero ложные срабатывания, мы провели несколько тестов с помощью инструмента, анализируя различные фрагменты текста, написанные человеком.

Результаты GPTZero по большей части были точными, несмотря на то, что одно предложение было идентифицировано как потенциально написанное ИИ.

Стоит ли доверять результатам GPTZero?

Судя по нашему тестированию, полагаться исключительно на результаты этого инструмента может быть рискованно. Фактически, каждый раз, когда вы генерируете результат с помощью инструмента, появляется заявление об отказе от ответственности, которое предупреждает преподавателей не полагаться на результаты этого инструмента.

Таким образом, если разработчик инструмента не гарантирует, что его результаты надежны, преподавателям не следует полностью полагаться на него. Почему? Потому что было бы несправедливо, если бы ученик получил плохую оценку только потому, что GPTZero вернул ложный положительный результат.

Усилия GPTZero по минимизации ложных срабатываний

Хотя впереди еще долгий путь, GPTZero добился значительных успехов в сокращении ложных срабатываний. Новая модель глубокого обучения, внедренная компанией, стимулировала эти усилия, сделав инструмент обнаружения ИИ гораздо более надежным, чем услуги конкурентов.

Новая модель глубокого обучения использует более разнообразный набор проверочных данных, опираясь на такие источники, как образовательные тексты, газетные статьи, сообщения в социальных сетях и контент вопросов и ответов. Этот расширенный и разнообразный набор данных позволяет GPTZero лучше различать данные, созданные человеком, и данные, созданные искусственным интеллектом. Более того, компания также утверждает, что прогнозы GPTZero более «уверены», чем раньше.

Не всегда доверяйте результатам обнаружения ИИ

В качестве потенциального противоядия от технологии OpenAI GPT GPTZero имеет большой потенциал; однако предстоит пройти долгий путь. На данный момент это не совсем надежно. Но сможет ли основная версия GPTZero преодолеть все ограничения и точно уловить контент ИИ? Нам просто придется подождать, чтобы узнать.