16 dos melhores detectores de conteúdo AI e ChatGPT comparados

Publicados: 2023-04-25

À medida que novas alternativas do ChatGPT surgem diariamente, os detectores de conteúdo AI também estão ganhando popularidade.

Neste artigo, compartilharei 16 desses detectores e mostrarei como eles pontuam alguns parágrafos de minha escrita original e não publicada em comparação com alguns parágrafos sobre o mesmo tópico do ChatGPT.

Também abordarei os tipos de funções para as quais os detectores de IA são (e não são) adequados e como os profissionais de marketing, editores e SEOs devem pensar sobre eles.

Quais ferramentas de detecção são boas (e ruins) em

Conforme detalhei em outros artigos, o conteúdo generativo de IA e ChatGPT apresenta vários problemas:

  • As informações geradas por IA podem ser factualmente incorretas, perigosas, desatualizadas ou enganosas.
  • As saídas de escrita AI podem ser inferiores.
  • Embora não haja nenhuma penalidade explícita para o conteúdo de IA, o Google nem sempre pode confiar e vê-lo como conteúdo criado por humanos.
  • O conteúdo de IA pode “enganar” editores ou empresas que pensam que estão pagando por conteúdo criado por humanos.
  • O conteúdo de IA pode alavancar o trabalho criativo de humanos e redirecioná-lo sem atribuição.

É importante observar que os atuais detectores de IA não resolvem todos esses problemas.

Principalmente, essas ferramentas não verificam os fatos do conteúdo de IA, melhoram ou auditam a qualidade do conteúdo ou fornecem citações para informações extraídas de outras fontes.

Dito isso, as áreas em que os detectores de IA podem ajudar incluem:

  • Plágio : muitas dessas ferramentas possuem detecção de plágio incorporada, portanto, há alguma verificação para saber se o conteúdo de IA foi amplamente extraído de outra fonte.
  • Prevenção de penalidades : se você está preocupado com a desvalorização do conteúdo de IA de alguma forma nos resultados de pesquisa, essas ferramentas podem ajudar a dar uma ideia de como o conteúdo de IA é facilmente detectável. (Claro, o Google sem dúvida terá ferramentas e verificações diferentes.)
  • Auditoria de uso de IA : se você tiver uma política ou maneira específica de compensar os escritores por conteúdo original versus conteúdo gerado por IA, essas ferramentas podem fornecer uma ideia aproximada de se um escritor usa IA para gerar conteúdo. (Observe que eles também podem retornar falsos negativos e positivos.)
  • Compreendendo os resultados da pesquisa: algumas dessas ferramentas oferecem extensões do Chrome, que podem ajudar você a entender se os concorrentes e outros sites usam conteúdo de IA ou não.

Como funciona o software de detecção de IA

Cada ferramenta é diferente e tem sua abordagem para o problema. Mas, na maioria das vezes, as ferramentas de detecção do ChatGPT classificam o conteúdo com base na previsibilidade das escolhas de frase dentro de um conteúdo.

Em outras palavras, a probabilidade de o conteúdo ser classificado como IA versus humano tem muito a ver com o fato de o software de detecção considerar um texto como seguindo o padrão provável que a IA seguiria na geração de conteúdo.

Os dois conceitos centrais em torno desse processo são chamados:

  • Explosão : duração e andamento previsíveis da estrutura da frase.
  • Perplexidade : Uma aleatoriedade nas palavras escolhidas em uma frase ou coleção de frases.

Por exemplo, em um ensaio sobre a fundação da América, é altamente improvável que a IA generativa inclua uma anedota aleatória e desigual sobre a primeira vez que viram um pinguim, de modo que provavelmente pareceria escrita humana para uma ferramenta de detecção.

Semelhante à forma como os detectores do ChatGPT surgiram para detectar a escrita de IA generativa, as ferramentas já estão sendo desenvolvidas para contornar os detectores. (E, claro: os detectores provavelmente já estão pensando em como detectar os bypassers e assim por diante).

Ferramentas como Indetectável ou Quillbot irão reescrever seu conteúdo, às vezes tornando mais difícil a detecção de certas ferramentas de detecção de IA.

Além disso, várias pessoas encontraram diferentes prompts para fazer com que o ChatGPT e outras ferramentas de escrita de IA produzam conteúdo com pontuação “mais humana” na escala de humano para IA, usando prompts que definem explosão e perplexidade e dizem ao ChatGPT para escrever com mais de cada um.

A precisão da detecção é importante para você?

Uma pergunta importante a ser respondida antes de se aprofundar nessas ferramentas é:

Quanto você se preocupa em detectar se o conteúdo é escrito por IA? E porque?

Se você estiver usando o ChatGPT para reescrever tags de título ou gerar uma cópia de e-mail, talvez não importe se esse conteúdo "passar" nas verificações de redação da IA.

Além disso, se um escritor usa AI para gerar uma cópia e a cópia é ótima, talvez a pontuação não seja importante.

Essas ferramentas de detecção provavelmente estarão engajadas na “corrida armamentista de detecção” com ferramentas de detecção e prompts que mencionei acima.


Obtenha a newsletter diária em que os profissionais de marketing de busca confiam.

Processando ... Por favor aguarde.

Consulte os termos.


Os melhores detectores de escrita AI comparados

Se você ainda estiver procurando por um detector de conteúdo AI/ChatGPT, examinaremos cada um deles e como eles “pontuaram” na avaliação de cópia gerada por humanos versus cópia AI versus cópia AI que usou este prompt para tentar “superar a detecção ."

Observação : a detecção versus alguns parágrafos de conteúdo não é necessariamente um teste completo dos recursos de detecção dessas ferramentas. Esperançosamente, isso lhe dará uma noção aproximada de como eles classificam conteúdos diferentes e um vislumbre da variedade de resultados que você pode esperar desses tipos de ferramentas.

(Você pode ver os exemplos reais inseridos na ferramenta – o exemplo “humano” escrito por mim, o exemplo “AI” escrito pelo ChatGPT via GPT-4 e a cópia atualizada com base no mesmo tópico aqui.)

Na tabela abaixo, você pode ver como cada ferramenta marcou a cópia que escrevi do zero, a cópia que tirei do ChatGPT diretamente sem nenhuma modificação imediata e essa mesma cópia ajustada com o prompt “perplexity and burstiness”:

Detectores de escrita Chatgpt Ai comparados

Abaixo está uma breve visão geral das ferramentas incluídas na tabela e alguns de seus principais recursos.

1. Originalidade.AI

Originalidade.IA

Originality.AI é uma ferramenta paga descrita como “o mais preciso detector de conteúdo AI e verificador de plágio criado para editores de conteúdo sérios”.

Custa $0,01 por crédito, que escaneia 100 palavras. Ele também possui um scanner de plágio ao lado do scanner AI.

Como você pode ver no gráfico acima, este é o único scanner AI com 100% de confiança de que o conteúdo humano era humano e que o conteúdo AI era AI (além de estar correto em todos os casos).

Hive Moderation (discutido posteriormente no artigo) teve essencialmente a mesma conclusão com uma pontuação de IA de 0% para o conteúdo humano e 99,9% de confiança de que os dois textos gerados por IA eram IA.

Além de ter uma extensão do Chrome e uma pontuação geral, o Originality.AI adicionou um recurso que destaca as seções específicas do conteúdo que você cola que ele prevê que será ou não será AI.

Eu uso essa ferramenta com mais frequência para verificar o conteúdo de IA pessoalmente. Meu caso de uso mais frequente é verificar o conteúdo enviado por escritores freelancers com os quais trabalhamos para IA e plágio.

2. Escritor

Escritor

O Writer oferece um detector gratuito que funciona com até 1.500 caracteres e requer acesso à API para mais.

Essa ferramenta essencialmente pensou que todos os envios eram relativamente prováveis ​​de serem gerados por humanos.

Writer é uma plataforma de escrita AI, e o detector de conteúdo gratuito também permite que você insira um URL para verificar.

Não há nenhum recurso de plágio diretamente nesta ferramenta e fornece uma pontuação geral, mas não marca seções específicas como prováveis ​​ou improváveis ​​de serem geradas por IA.

3. Detector de conteúdo AI de copyleaks

Detector de conteúdo AI de copyleaks

O Copyleaks AI Content Detector tem alguns recursos interessantes:

  • Dá a você um veredicto geral (humano ou IA).
  • Se você passar o mouse sobre um texto específico, terá uma porcentagem de probabilidade de que o texto seja humano versus uma cópia de IA.
  • Ele pré-carrega com exemplos em diferentes GPT e saídas humanas para mostrar como a ferramenta funciona
  • Há uma extensão do Chrome.

A ferramenta é gratuita e, embora uma única varredura não faça as duas coisas, também há um detector de plágio.

Ele identificou com precisão muito do conteúdo gerado por humanos como humano e muito do conteúdo gerado por IA como IA. No entanto, nem sempre foi confiável e estava incorreto em algumas seções individuais.

4. Classificador de texto AI da OpenAI

Classificador de texto AI da OpenAI

O AI Text Classifier é uma ferramenta gratuita da OpenAI, a empresa que criou o GPT (que é o que executa muitas ferramentas generativas de IA) e o ChatGPT.

Se você pensou que a empresa que fabrica as ferramentas de IA mais populares teria o detector mais preciso, isso não parecia verdade em nosso teste.

A ferramenta identificou o conteúdo humano como “muito improvável” de ser gerado por IA , mas identificou o conteúdo da própria plataforma da OpenAI como “incerto” se foi gerado por IA e “improvável” gerado por IA com e sem o prompt adicional.

A ferramenta é gratuita (você precisa de uma conta OpenAI). Não há muitos sinos e assobios e nenhuma verificação de plágio.

Você obtém uma descoberta (como a que você vê na captura de tela), mas nenhuma pontuação precisa. Ele também não destacará seções específicas da cópia por sua probabilidade individual de ser gerada por IA ou não.

5. Detector de conteúdo Crossplag AI

Detector de conteúdo Crossplag AI

O Crossplag oferece algumas varreduras gratuitas sem uma conta. Ao fazer login, você receberá varreduras gratuitas ilimitadas. A ferramenta fornece uma pontuação geral, mas não oferece a capacidade de verificar se há plágio ou marcar seções individuais do conteúdo.

Crossplaq identificou o conteúdo humano e AI como 99% humano. Vale a pena notar que a ferramenta afirma repetidamente que funciona melhor em textos mais longos.

Nossas amostras aqui estavam acima da recomendação mínima de 200 caracteres, mas no lado mais curto.

6. GPTZero

GPTZero

O GPTZero possui versões gratuitas e pagas. A versão gratuita dá uma pontuação e tem alguns exemplos pré-carregados.

A versão paga também oferece um verificador de plágio, destacando o conteúdo de IA e a capacidade de fazer upload em massa de vários conteúdos (que na verdade foi projetado para um ambiente de sala de aula, como muitas dessas ferramentas).

O preço das ferramentas pagas não está listado no site, mas você pode preencher formulários para solicitar acesso à ferramenta paga e à API.

A versão gratuita da ferramenta identificou todas as três amostras de escrita como provavelmente inteiramente humanas.

7. Detector AI de muda

Detector de IA de Mudas

O Sapling AI Detector oferece versões gratuitas e pagas, uma extensão do Chrome, uma API, uma pontuação geral e destaque de frases.

Sapling identificou o conteúdo humano como principalmente humano e o conteúdo de IA como quase inteiramente IA. No entanto, identificou o conteúdo do ChatGPT “perplexo” e “explosivo” como altamente provável de ser humano.

8. Detector de inteligência artificial do Content at Scale

Detector de IA da Content at Scale

O Content at Scale AI Detector é gratuito e oferece uma pontuação com uma divisão de diferentes elementos dentro do conteúdo (previsibilidade, probabilidade e padrão) e exemplos pré-preenchidos.

Não existe nenhuma opção de detecção de plágio e as seções de conteúdo individuais não são destacadas.

O conteúdo em escala avaliou todas as três amostras como 92% humanas ou superior.

O humano teve a maior porcentagem humana, seguido pelo conteúdo GPT modificado por prompt e o conteúdo gerado pelo prompt mais simples.

9. ZeroGPT

ZeroGPT

ZeroGPT é uma ferramenta gratuita que oferece uma pontuação geral e destaque, mas sem detecção de plágio.

A ferramenta retornou baixas porcentagens de probabilidade gerada por IA em geral. Correspondeu aproximadamente à humanidade das amostras, com a amostra gerada por humanos obtendo a menor porcentagem de IA, seguida pelo prompt de rajada / perplexidade e, em seguida, pelo prompt mais simples).

10. GLTR

GLTR

GLTR, ou “Giant Language model Test Room”, é uma ferramenta gratuita que foi um esforço colaborativo entre Hendrik Strobelt, Sebastian Gehrmann e Alexander Rush do laboratório MIT-IBM Watson AI e Harvard NLP.

A ferramenta oferece alguma pontuação geral, mas mostra principalmente se cada palavra dentro de um texto foi uma das 10, 100, 1.000 ou fora das 1.000 palavras mais prováveis ​​de serem geradas pela IA com base no contexto anterior do texto. Não há recurso de plágio definido aqui.

A ferramenta retornou o maior número de “palavras prováveis” e palavras particularmente prováveis ​​no top 10 para o texto gerado pelo prompt mais simples.

Ainda assim, a distribuição foi semelhante para a cópia imediata humana e adicional neste pequeno teste.

11. Detector de ChatGPT no rosto de abraço

Detector ChatGPT no rosto abraçado

Este é um detector gratuito que fornece uma previsão e pontuação geral. Não possui nenhum plágio ou recursos de destaque.

Essa ferramenta gerou mais de 99,9% de probabilidade de conteúdo humano para todas as três amostras.

12. Detector de conteúdo AI do corretor

Detector de conteúdo AI corretor

Corrector AI Detector é uma ferramenta gratuita com um limite de contagem de 600 palavras e uma pontuação percentual. Não há plágio ou recursos de destaque para a ferramenta.

A ferramenta rotulou cada uma das amostras com uma probabilidade percentual muito baixa de ser “falsa” ou AI.

13. Detector de GPT completo

Detector GPT completo

O Writefull GPT Detector é uma ferramenta gratuita com uma pontuação simples e acesso à API. Não há destaque e nem detecção de plágio.

Ele encontrou todas as três amostras como provavelmente humanas, mas tinha o conteúdo ChatGPT com o prompt mais simples com a maior probabilidade de IA (19%).

14. Detecção de conteúdo gerado por IA da Hive Moderation

Detecção de conteúdo gerado por IA do Hive Moderation

A ferramenta Hive Moderation AI-Generated Content Detection é gratuita (com limites de caracteres e exigindo login após vários usos).

Ele não oferece plágio ou realce, mas permite que você divida o conteúdo por seções e obtenha pontuações específicas do segmento.

A Hive pontuou cada amostra de escrita corretamente, com 0% de probabilidade de ser IA para o conteúdo humano e 99,9% de pontuação para as amostras de IA.

(Apenas Originality.AI teve um nível de confiança semelhante ao ser preciso nas amostras.)

15. Ferramenta de paráfrase AI Detector de conteúdo

Ferramenta de paráfrase AI Detector de conteúdo

A ferramenta de paráfrase é um reescritor, e eles oferecem este detector de conteúdo AI gratuito com uma conclusão geral e realce e sem recursos de plágio.

A ferramenta de paráfrase concluiu que cada um dos textos provavelmente era humano.

16. Verificação de Redação AI

Verificação de Escrita AI

O AI Writing Check é uma ferramenta gratuita que oferece uma pontuação, tem um máximo de palavras e não apresenta realce de texto para probabilidade de IA ou recursos de plágio.

AI Writing Check identificou todas as três amostras de escrita como humanas.

Principais aprendizados do teste de 16 verificadores de conteúdo AI e ChatGPT

Novamente, é essencial ressalvar minhas principais descobertas aqui, porque três amostras curtas de redação são amostras muito pequenas para tirar conclusões firmes sobre as ferramentas individuais.

Dito isso, encontrei alguns padrões interessantes relacionados a detectores de escrita de IA em geral:

  • Calibração: a maioria das ferramentas encontrou todas as três amostras de escrita altamente prováveis ​​ou altamente improváveis ​​de serem humanas. Diferentes ferramentas provavelmente serão avaliadores “mais difíceis” ou “mais suaves” quando se trata de pontuar conteúdo humano versus IA, portanto, entender como uma ferramenta é calibrada pode ajudar a determinar o quão úteis elas são.
  • Recursos mais raros : alguns recursos raros nas ferramentas eram coisas como uploads em massa, detecção de plágio, ter uma extensão do Chrome e destacar seções específicas com probabilidade de ser IA versus humano.
  • Gratuito x pago : todas as ferramentas apresentadas aqui, exceto Originality.AI, tinham pelo menos versões gratuitas. Mas as ferramentas com resultados mais precisos e mais “recursos raros” tendem a ser as ferramentas com versão paga.

Eu recomendo ficar de olho em pelo menos algumas dessas ferramentas se você achar a detecção de IA útil em seus projetos.

O ritmo da inovação na geração, edição e detecção de conteúdo de IA pode rapidamente tornar sua ferramenta favorita obsoleta.


As opiniões expressas neste artigo são do autor convidado e não necessariamente do Search Engine Land. Os autores da equipe estão listados aqui.