Хотя ChatGPT может ответить на любой ваш вопрос, некоторые пользователи задаются вопросом, не содержат ли его ответы плагиат. Чтобы выяснить это, мы сгенерировали четыре разных типа текстов с помощью ChatGPT, а затем оценили их оригинальность с помощью различных инструментов обнаружения плагиата.

Что такое плагиат и как работают программы LLM?

Чтобы определить, виновен ли ChatGPT в плагиате, вам следует сначала понять, что представляет собой плагиат. Плагиат предполагает использование слов, идей или работ другого человека без надлежащего указания авторства. Это включает в себя прямое копирование текста из источника без цитирования или точное перефразирование чужих идей без подтверждения.

ChatGPT, как и другие модели больших языков (LLM), обучается на больших наборах данных, в основном на основе общедоступного контента. Однако сбор таких огромных объемов данных поднимает этические вопросы, поскольку первоначальные создатели не дали согласия на использование их работы при обучении LLM. Это приводит к спорам об этике и законности такой практики.

Хотя ChatGPT генерирует ответы на основе полученных им подсказок, проблема заключается в более широком контексте того, как OpenAI (разработчик ChatGPT) получил данные, используемые для его обучения, что предполагает использование контента без надлежащего согласия. Многие считают это плагиатом, а для многих веб-сайтов – кражей контента. Однако определить точные источники плагиата сложно.

В оставшейся части этой статьи мы сосредоточимся на том, занимается ли ChatGPT плагиатом своих результатов из других источников, не вдаваясь в особенности того, откуда приходят ответы. Давайте проверим оригинальность ответов ChatGPT с помощью различных инструментов обнаружения плагиата, чтобы увидеть, использует ли чат-бот текст из онлайн-источников напрямую.

ChatGPT занимается плагиатом эссе?

В этом первом примере мы поручили ChatGPT составить эссе на 300 слов по вопросам психического здоровья.

После этого мы использовали различные инструменты обнаружения плагиата, чтобы оценить оригинальность эссе, созданного чат-ботом. Эти инструменты включали средство проверки плагиата Quetext, встроенное средство проверки плагиата Microsoft Word, средство проверки плагиата Grammarly и сканер плагиата Duplichecker.

Встроенная программа проверки сходства Microsoft сообщила о нулевом проценте сходства с онлайн-источниками. Уровни плагиата, обнаруженные другими инструментами, также были минимальными: детектор плагиата Grammarly обнаружил четыре процента, детектор плагиата QueText обнаружил пять процентов, а сканер плагиата Duplichecker показал ноль процентов.

Учитывая небольшой процент обнаруженного плагиата, похоже, что ChatGPT не копирует эссе напрямую из существующих источников.

ChatGPT занимается плагиатом кода?

Чтобы оценить, занимается ли ChatGPT плагиатом кода, мы поручили чат-боту написать код для калькулятора на Python.

После этого мы провели проверку кода на плагиат с помощью специализированной программы проверки на плагиат под названием Dolos, которая обнаружила нулевой процент сходства. Кроме того, когда мы проверили код с помощью упомянутых выше общих инструментов обнаружения текстового плагиата, результаты были согласованными: почти ни одна из программ не обнаружила плагиата более четырех процентов.

Когда мы предложили ChatGPT сгенерировать код для калькулятора из разных учетных записей, ответы оказались разными. Это наблюдение и результаты проверок на плагиат показывают, что ChatGPT не просто копирует коды из онлайн-источников. Вместо этого он использует набор данных, на котором был обучен, для независимой генерации кода.

ChatGPT занимается плагиатом математических решений?

Во время третьего теста мы поручили чат-боту решить математическую задачу и предоставить подробное обоснование каждого шага.

Чтобы проверить оригинальность ответа, мы протестировали его результаты, используя несколько академических инструментов обнаружения плагиата, в том числе программу проверки плагиата PapersOwl, сканер плагиата Trinka на базе искусственного интеллекта, а также общие инструменты проверки плагиата, такие как как Grammarly, Duplichecker и QueText.

Детектор плагиата PapersOwl показал почти 46-процентное сходство между рассуждениями, сгенерированными чат-ботом, и онлайн-источниками. Аналогичным образом детектор плагиата Trinka сообщил о сходстве более 10 процентов. Кроме того, детектор плагиата Grammarly обнаружил 14 процентов сходства, QueText — 17 процентов, а Duplichecker — семь процентов.

Обнаружение большого количества плагиата в сгенерированном ответе не означает, что чат-бот напрямую копирует рассуждения математических вопросов из онлайн-источников. Это происходит главным образом потому, что решения и обоснования математических задач часто являются стандартными и широко доступны в Интернете.

Таким образом, хотя ChatGPT предлагает свои собственные ответы, найти те же ответы и рассуждения в Интернете возможно, что могло увеличить процент плагиата.

Использует ли ChatGPT контент из блогов?

Чтобы проверить, использует ли ChatGPT контент из онлайн-блогов, мы попросили чат-бота предоставить советы по поддержанию работоспособности аккумулятора ноутбука.

Microsoft Word обнаружил 10 процентов плагиата в сгенерированном тексте. Duplichecker показал четыре процента, проверка плагиата Grammarly показала 14 процентов, но Quetext обнаружил в тексте 58 процентов плагиата. При дальнейшем копании выяснилось, что часть текста в ответе чат-бота соответствует содержанию некоторых блогов.

Чтобы еще раз проверить, не является ли высокий уровень обнаружения плагиата простым совпадением, я задал чат-боту еще несколько вопросов об информации, которая легко доступна в Интернете. Процент плагиата в сгенерированных ответах был гораздо выше. По результатам нашего тестирования выяснилось, что чат-бот иногда использует фразы и текст из интернет-источников, что весьма удивительно.

Стоит ли использовать ChatGPT на работе или в учебе?

Хотя многие бесплатные онлайн-программы проверки на плагиат не обнаружили серьезного плагиата в ответах ChatGPT, вам не следует использовать его в академических или профессиональных целях.

Не используйте ChatGPT для школьных заданий, если вы учитесь. Преподаватели могут использовать такие инструменты, как GPTZero и детектор записи искусственного интеллекта Turnitin, для обнаружения контента, созданного искусственным интеллектом. Если ваша работа будет помечена такими инструментами как созданная искусственным интеллектом, вы можете провалить задание или даже быть исключенным из школы. Несмотря на то, что во многих инструментах обнаружения GPT прямо указано, что их не следует использовать для этой цели, они используются, и это может привести к проблемам. Не говоря уже о том, что на самом деле вы только обманываете себя, не изучая тему должным образом.

Можете ли вы использовать чат-бота для повышения эффективности своей работы? Это зависит. Если вы хотите улучшить процесс написания электронных писем или других текстовых форм, использование ИИ может сэкономить вам время и усилия. Однако вам следует использовать его только как инструмент, помогающий вам в ваших задачах, а не полагаться на то, что он сделает всю работу за вас.

Напротив, если ваша работа, например профессиональная писательская деятельность, запрещает использование таких инструментов, вам следует вообще избегать использования ChatGPT или любого другого инструмента.

Надеемся, наше тестирование дало вам представление о том, в какой степени ChatGPT может использовать ресурсы, доступные в Интернете. Однако важно отметить, что мы использовали бесплатные инструменты для проверки на плагиат и протестировали только ограниченный набор данных. Итак, хотя наши выводы могут быть полезны, их не следует воспринимать как абсолютные факты.