Detectando escrita de IA: quão confiáveis são os detectores?
Este artigo foi revisado de acordo com o processo editorial e as políticas da Science X. Os editores destacaram os seguintes atributos, garantindo a credibilidade do conteúdo:
As alegações de que o escritor canadense-haitiano Thelyson Orelien usou ferramentas de IA para escrever seu romance de estreia best-seller estão abalando o mundo literário francês e levantando questões sobre como o uso de IA pode ser detectado.
Uma conta X com um punhado de seguidores gerou polêmica ao alegar que o programa de detecção de IA Pangram concluiu que a história de um migrante haitiano viajando para o Canadá foi em grande parte escrita por um gerador de texto como Claude ou ChatGPT.
Orelien, 38 anos, nega as acusações e disse que provará que escreveu o livro, que foi vendido a editoras em mais de 20 países.
“Não escrevi este romance com a cabeça, mas com a coragem e o coração”, disse recentemente à AFP.
A AFP executou trechos do livro por meio de várias ferramentas de detecção de IA e obteve uma série de resultados – desde “muito provável” escrito por um humano até “100%” gerado por IA.
Dezenas de ferramentas estão agora disponíveis online para detectar texto gerado por IA, muitas delas projetadas para uso educacional ou editorial.
Eles geralmente comparam grandes quantidades de texto gerado por IA com conteúdo escrito por humanos.
Seu desempenho melhorou significativamente nos últimos anos.
Em um artigo publicado em outubro de 2025 chamado “Escrita Artificial e Detecção Automatizada”, pesquisadores da Universidade de Chicago descobriram que Pangram “atingiu taxas de erro próximas de zero” em trechos de médio a longo prazo.
Thierry Poibeau, pesquisador de processamento de linguagem natural do instituto nacional de pesquisa francês CNRS, disse que os programas procuram “tiques linguísticos”.
“O exemplo clássico é o fraseado triádico (usando três orações) ou travessões”, explicou Poibeau.
Esses sinais reveladores costumavam ser comuns em textos gerados porque as ferramentas foram treinadas na escrita científica americana ou em romances americanos, disse ele.
Pangram afirma que pode “detectar texto de IA analisando e compreendendo dicas sutis na escrita”.
Algumas palavras ou frases aparecem regularmente, enquanto estruturas monótonas de frases também são um sinal de alerta.
Muitas ferramentas publicam números percentuais sobre a sua precisão, mas os números são impossíveis de verificar e não levam em conta o risco de um falso positivo.
O CEO e cofundador da Pangram, Max Spero, enfatizou ao canal americano The Atlantic que a ferramenta não deveria ser o árbitro final, mas sim um ponto de partida para uma investigação mais aprofundada.
De acordo com Poibeau, esses sistemas de detecção também enfrentam um “problema de alvo móvel” porque os programas de IA estão “em constante evolução”.
Poibeau também apontou um problema potencial na detecção do uso de IA em romances.
“A ferramenta pode captar algo particular na escrita, algo repetitivo, mas pode ser exatamente isso que constitui o estilo de um escritor”, disse ele.
Orelien afirmou esta semana que seu estilo se baseava nas tradições haitianas e caribenhas, dizendo ao jornal Liberation que o software estava "acostumado à tradição literária francesa e aos autores clássicos".
Benoit Raphael, empresário e escritor especializado em IA, publicou a sua própria investigação utilizando Pangram para testar o trabalho de Orelien – e os resultados também indicaram a utilização de IA.
“O fato de ter cerca de 100% de IA, ou mesmo 90%, é um sinal bastante revelador”, disse ele à revista Nouvel Obs.
Embora o livro tenha sido amplamente elogiado pela crítica e estivesse saindo das prateleiras da França antes do escândalo, algumas dúvidas foram levantadas.
Lea Bory, em seu podcast Torchon, foi possivelmente a primeira a dizer publicamente no início deste mês que achava que tinha sido escrito pela IA devido à natureza repetitiva das frases e ao uso excessivo de analogias que são marcas registradas da IA.
Escrevendo no jornal Canard Enchaine, Fabrice Colin também criticou a estrutura estereotipada das frases e disse que "procurou em vão uma voz única" na prosa.
Mestrado em física com experiência em pesquisa. Entusiasta de notícias científicas de longa data. Desempenha um papel fundamental no sucesso editorial da Science X. Perfil completo →
