Embora o ChatGPT possa responder a qualquer pergunta que você possa ter, alguns usuários se perguntam se suas respostas contêm plágio. Para investigar isso, geramos quatro tipos diferentes de textos usando ChatGPT e depois avaliamos sua originalidade usando diversas ferramentas de detecção de plágio.

O que exatamente é plágio e como funcionam os LLMs?

Para determinar se ChatGPT é culpado de plágio, você deve primeiro entender o que constitui plágio. O plágio envolve o uso de palavras, ideias ou trabalho de outra pessoa sem a devida atribuição. Isso inclui copiar diretamente o texto de uma fonte sem citação ou parafrasear de perto as ideias de outra pessoa sem reconhecimento.

ChatGPT, como outros Large Language Models (LLMs), é treinado em grandes conjuntos de dados, principalmente de conteúdo disponível publicamente. No entanto, a recolha de quantidades tão vastas de dados levanta questões éticas, uma vez que os criadores originais não consentiram que o seu trabalho fosse utilizado na formação dos LLMs. Isso leva a debates sobre a ética e a legalidade de tais práticas.

Embora o ChatGPT gere respostas com base nas solicitações que recebe, o problema está no contexto mais amplo de como o OpenAI (desenvolvedor do ChatGPT) obteve os dados usados ​​para treiná-lo, o que envolve o uso de conteúdo sem o devido consentimento. Muitos veem isso como plágio e, para muitos sites, roubo de conteúdo. No entanto, é difícil identificar as fontes exatas do plágio.

No restante deste artigo, nos concentraremos em saber se o ChatGPT plagia sua saída de outras fontes sem nos aprofundar nos detalhes de onde vêm suas respostas. Vamos verificar a originalidade das respostas do ChatGPT usando várias ferramentas de detecção de plágio para ver se o chatbot usa texto de fontes online diretamente.

O ChatGPT plagia redações?

Neste primeiro exemplo, incumbimos o ChatGPT de redigir um ensaio de 300 palavras sobre questões de saúde mental.

Em seguida, utilizamos diversas ferramentas de detecção de plágio para avaliar a originalidade da redação gerada pelo chatbot. Essas ferramentas incluíam o verificador de plágio Quetext, o verificador de plágio integrado do Microsoft Word, o verificador de plágio do Grammarly e o scanner de plágio Duplichecker.

O verificador de similaridade integrado da Microsoft relatou zero por cento de similaridade com fontes online. Os níveis de plágio detectados por outras ferramentas também foram mínimos: o detector de plágio do Grammarly encontrou quatro por cento, o detector de plágio do QueText encontrou cinco por cento e o scanner de plágio do Duplichecker mostrou zero por cento.

Considerando a pequena porcentagem de plágio detectado, parece que o ChatGPT não copia diretamente ensaios de fontes existentes.

O ChatGPT plagia código?

Para avaliar se o ChatGPT plagia código, encarregamos o chatbot de escrever código para uma calculadora em Python.

Em seguida, conduzimos uma verificação de plágio no código usando um verificador de plágio de programação especializado chamado Dolos, que detectou zero por cento de similaridade. Além disso, quando verificamos o código usando as ferramentas gerais de detecção de plágio de texto mencionadas acima, os resultados foram consistentes, com quase nenhum dos programas detectando mais de 4% de plágio.

Quando solicitamos ao ChatGPT que gerasse um código para uma calculadora de contas diferentes, as respostas pareciam diferentes. Esta observação e os resultados das verificações de plágio indicam que o ChatGPT não replica simplesmente códigos de fontes online. Em vez disso, ele se baseia no conjunto de dados no qual foi treinado para gerar código de forma independente.

O ChatGPT plagia soluções matemáticas?

Durante o terceiro teste, encarregamos o chatbot de resolver um problema matemático e fornecer um raciocínio detalhado para cada etapa.

Para verificar a originalidade da resposta, testamos seu resultado usando várias ferramentas de detecção de plágio específicas para acadêmicos, incluindo o verificador de plágio PapersOwl, o scanner de plágio Trinka com tecnologia de IA, bem como ferramentas gerais de verificação de plágio, como como Grammarly, Duplichecker e QueText.

O detector de plágio do PapersOwl indicou uma semelhança de quase 46 por cento entre o raciocínio gerado pelo chatbot e as fontes online. Da mesma forma, o detector de plágio Trinka relatou mais de 10% de similaridade. Além disso, o detector de plágio do Grammarly detectou 14% de similaridade, o QueText encontrou 17% e o Duplichecker mostrou 7%.

A detecção de alto plágio na resposta gerada não sugere que o chatbot copie diretamente o raciocínio para questões matemáticas de fontes online. Isso ocorre principalmente porque as soluções e o raciocínio para problemas matemáticos costumam ser padrão e estão amplamente disponíveis online.

Portanto, embora o ChatGPT apresente suas próprias respostas, é possível encontrar as mesmas respostas e raciocínios on-line, o que pode ter aumentado as altas porcentagens de plágio.

O ChatGPT usa conteúdo de blogs?

Para verificar se o ChatGPT usa conteúdo de blogs online, pedimos ao chatbot que fornecesse dicas para manter a saúde da bateria do laptop.

O Microsoft Word detectou 10% de plágio no texto gerado. O Duplichecker mostrou quatro por cento, o verificador de plágio do Grammarly indicou 14 por cento, mas o Quetext encontrou 58 por cento de plágio no texto. Ao aprofundar, parte do texto da resposta do chatbot correspondia ao conteúdo de alguns blogs.

Para verificar se a alta detecção de plágio não foi apenas uma coincidência, fiz mais algumas perguntas ao chatbot sobre informações que estão facilmente disponíveis online. A porcentagem de plágio nas respostas geradas foi muito maior. Com base em nossos testes, parece que o chatbot às vezes usa frases e textos de fontes online, o que é bastante surpreendente.

Você deve usar o ChatGPT para trabalho ou escola?

Embora muitos verificadores de plágio online gratuitos não tenham detectado grande plágio nas respostas do ChatGPT, você não deve usá-lo para fins acadêmicos ou profissionais.

Não use ChatGPT para suas tarefas escolares se você for estudante. Os instrutores podem usar ferramentas como GPTZero e o detector de escrita de IA da Turnitin para detectar conteúdo gerado por IA. Se o seu trabalho for sinalizado como gerado por IA por essas ferramentas, você poderá ser reprovado na tarefa ou até mesmo ser expulso da escola. Embora muitas ferramentas de detecção de GPT afirmem especificamente que não devem ser usadas para essa finalidade, elas são, e isso pode causar problemas. Sem mencionar que você só está se enganando por não estudar o assunto adequadamente.

Você pode usar o chatbot para melhorar seu desempenho no trabalho? Depende. Se você deseja melhorar seu fluxo de escrita em e-mails ou outros formulários de texto, usar IA pode economizar tempo e esforço. No entanto, você deve usá-lo apenas como uma ferramenta para auxiliá-lo em suas tarefas, em vez de depender dele para fazer todo o trabalho para você.

Por outro lado, se o seu trabalho, como a redação profissional, proíbe o uso de tais ferramentas, você deve evitar o uso do ChatGPT ou qualquer outra ferramenta.

Esperamos que nossos testes tenham lhe dado uma ideia de até que ponto o ChatGPT pode aproveitar os recursos disponíveis na web. No entanto, é importante observar que usamos ferramentas gratuitas de plágio e testamos apenas um conjunto de dados limitado. Portanto, embora as nossas descobertas possam ser úteis, não devem ser tomadas como factos absolutos.