Um professor cola um ensaio num detector e obtém o & quot;87% AI-generated" Um editor executa um artigo freelancer' s através de outro e obtém o & quot; provavelmente humano" Um candidato a emprego é informado de que sua carta de apresentação foi sinalizada Em cada caso, um único número está sendo solicitado a responder a uma pergunta sobre uma pessoa: eles escreveram isso? esse número não pode carregar o peso, e as razões estão bem documentadas.
O que pode ser medido honestamente é o próprio texto Comprimento da frase, vocabulário, hedge e pontuação são fatos sobre a escrita, e são os mesmos fatos que fazem um rascunho parecer estereotipado para um leitor Este guia explica por que a detecção de autoria falha, o que cada sinal mensurável significa, como os números são calculados e como usá-los para melhorar um rascunho em vez de acusar alguém Os exemplos usam o Verificador de escrita AI, um dos Ferramentas de escrita de IA no Toolz, que relata seis sinais e deliberadamente não dá probabilidade de autoria de IA.
tl;dr: Nenhuma ferramenta pode dizer com segurança se a IA escreveu um texto A OpenAI retirou seu próprio classificador em 2023 por baixa precisão, e pesquisas mostram que os detectores geralmente sinalizam escritores ingleses não nativos como IA. O que um verificador pode medir honestamente é a escrita: variação do comprimento da frase (explosão), comprimento médio da frase, vocabulário usado em excesso por 1.000 palavras, frases de hedge, densidade de traço em e abridores conectivos Verificador de escrita AI relata esses seis sinais com as evidências por trás de cada um, executa o lado do cliente e é gratuito, sem inscrição.
Um detector de IA pode dizer quem escreveu um texto?
Não. Um detector de IA é um classificador estatístico que adivinha a autoria a partir de características superficiais do texto, e essas suposições são erradas com frequência suficiente para que agir sobre elas seja inseguro.
A evidência mais clara vem das empresas que os construíram A OpenAI lançou um classificador de texto de IA em Janeiro de 2023 e retirou-o em Julho de 2023 A actualização sobre sua página de anúncio diz que o classificador já não estava disponível & quot; devido à sua baixa taxa de precisão & quot; Quando a organização que treinou o modelo não pode construir um detector confiável para a sua saída, uma pontuação de terceiros merece pouca confiança.
As falhas também não são aleatórias. Um estudo de 2023 de pesquisadores de Stanford, Os detectores GPT são tendenciosos contra escritores ingleses não nativos (Liang et al.), correu sete detectores amplamente utilizados sobre ensaios TOEFL escritos por falantes não nativos de inglês Mais da metade desses ensaios escritos por humanos foram classificados como gerados por IA em média, enquanto ensaios de alunos da oitava série dos EUA foram classificados com muito mais precisão O mecanismo é simples: as pessoas que escrevem em uma segunda língua tendem a usar um vocabulário mais estreito e estrutura de frases mais regular, e regularidade é exatamente o que os detectores leem como máquina-like.
Mais dois problemas tornam as pontuações frágeis A edição ligeira de um rascunho gerado pode mover uma pontuação do & quot; A.I." para o & quot; human" E a edição pesada de um rascunho humano com software de gramática pode movê-lo para o outro lado Uma medida que muda sob edição comum não é medir a autoria.
O que um verificador de escrita pode medir honestamente?
Ele pode medir propriedades do texto que são verdadeiras, independentemente de quem o produziu O verificador Toolz relata seis:
| Sinal | O que mede | Como é relatado | Final semelhante ao humano | Final fórmico |
|---|---|---|---|---|
| Variação frase-comprimento | Quanto os comprimentos das frases diferem (explosão) | Coeficiente de variação, em percentagem | 70% ou mais | 15% ou menos |
| Duração média da frase | Palavras médias por frase | palavras | 14 ou menos | 30 ou mais |
| Vocabulário usado em excesso | Cerca de 40 palavras modelos de uso excessivo | Contagem e taxa por 1.000 palavras | 0 por 1.000 | 20 ou mais por 1.000 |
| Frases hedge | Frases como o & quot; vale a pena notar & quot; | contar | 0 | 5 ou mais |
| Densidade do traço EM | Em e en traços | Contagem e taxa por 1.000 palavras | 0 por 1.000 | 10 ou mais por 1.000 |
| Abridores conectivos | Sentenças começando Além disso, Além disso, No entanto | Parcela de sentenças | 0% | 30% ou mais |
Cada sinal é colocado em uma escala de 0 a 1 entre essas duas âncoras, e colorido como humano-like (abaixo de 0,34), misto (0,34 a 0,67) ou estereotipado (acima de 0,67).As âncoras são limiares de edição, não pontos de corte estatísticos para autoria Eles marcam onde um leitor começa a notar o padrão.
Cada sinal também lista suas evidências: os comprimentos reais das frases, as palavras correspondidas, as sebes encontradas, as frases que abriram com um conectivo Se um número parece errado, a evidência mostra o porquê.
O que é burstiness, e por que é o sinal mais forte?
Explosão é o quanto o comprimento da frase varia em um texto A escrita humana mistura frases curtas e longas Uma frase de três palavras acerta um ponto Uma frase de trinta palavras caminha por uma qualificação com suas cláusulas Os rascunhos gerados tendem a se estabelecer em um comprimento médio uniforme, frase após frase de quinze a vinte e duas palavras.
O verificador relata burstiness como o coeficiente de variação: o desvio padrão dos comprimentos das frases dividido pela média Dividir pela média torna a figura independente de quanto tempo as frases são em geral, de modo que um texto de frases curtas e um texto de longas podem ser comparados de forma justa.
Aqui está o cálculo para quatro frases com comprimentos de 4, 17, 2 e 11 palavras:
mean = (4 + 17 + 2 + 11) / 4 = 8.5
squares = 4.5² + 8.5² + 6.5² + 2.5² = 20.25 + 72.25 + 42.25 + 6.25 = 141
variance = 141 / 4 = 35.25
std dev = √35.25 ≈ 5.94
CV = 5.94 / 8.5 ≈ 0.70 → "70% variation"
Com 70%, o texto fica no extremo humano. Mude esses comprimentos para 15, 17, 16 e 18 e o desvio padrão cai para cerca de 1,12 em uma média de 16,5, uma variação de aproximadamente 7%, que é o final estereotipado.
A arrogância é o sinal único mais forte porque é difícil de falsificar sem reescrever e fácil de corrigir quando o faz: dividir uma frase longa, mesclar duas curtas e adicionar uma frase muito curta onde um ponto merece ênfase.
Como são contados o vocabulário, a cobertura, os traços e os abridores?
Vocabulário usado em excesso. O verificador conta correspondências de palavras inteiras a partir de uma lista de cerca de 40 palavras que aparecem com muito mais frequência no texto gerado do que na escrita humana, inclusive leverage, robust, crucial, comprehensive, holistic, meticulous, transformative e navigating. A contagem é convertida em uma taxa por 1.000 palavras para que textos curtos e longos sejam comparados.
Frases hedge. São contados dez padrões, incluindo o & quot; é importante notar & quot;, o & quot; vale a pena notar & quot;, o & quot; deve ser notado & quot;, o & quot; quando se trata do & quot;, o & quot; no final do dia & quot; o & quot; desnecessário dizer & quot; e o & quot; no & n.o 39; s fast-paced world & quot;.
Densidade do traço Em. Cada traço em e traço en é contado e convertido para uma taxa por 1.000 palavras As pessoas que digitam em um teclado raramente produzem o caractere; os modelos o produzem constantemente.
Abridores conectivos. O verificador conta frases que começam com Além disso, Além disso, Além disso, Notavelmente, Importante, Consequentemente ou No entanto, como uma parcela de todas as frases.
Duração média da frase. A contagem média de palavras por frase. Cerca de 15 a 20 palavras são lidas confortavelmente; depois dos 25 anos o leitor começa a trabalhar.
As frases são divididas após um ponto, ponto de interrogação ou ponto de exclamação seguido de espaços em branco, e as palavras são séries de letras e apóstrofos Abreviaturas como o & quot; por exemplo, & quot; pode, portanto, dividir uma frase mais cedo, o que altera ligeiramente os números de comprimento A lista de evidências mostra os comprimentos para que você possa identificá-la.
Um exemplo trabalhado com cada número
Cole este pequeno texto:
The report is ready. It covers three regions and explains why sales in the north fell by a fifth last spring. Read it. Moreover, it is important to note that the landscape is changing.
O verificador relata 34 palavras e 4 frases, com estes sinais:
| Sinal | apreço | veredito |
|---|---|---|
| Variação frase-comprimento | variação de 70% (comprimentos 4, 17, 2, 11) | Humano |
| Duração média da frase | 8,5 palavras | Humano |
| Vocabulário usado em excesso | 1 instância (29,4 por 1.000 palavras): paisagem | Formulaico |
| Frases hedge | 1 encontrado: & quot; é importante anotar & quot; | Humano |
| Densidade do traço EM | 0 traços (0,0 por 1.000 palavras) | Humano |
| Abridores conectivos | 1 de 4 frases | Formulaico |
Duas lições saem disso Primeiro, as taxas em textos muito curtos balançam forte: uma palavra em 34 é uma taxa de 29,4 por 1.000, fora da escala Colar pelo menos algumas centenas de palavras antes de ler muito no vocabulário e taxas de traço Segundo, os sinais apontam para uma frase específica O último carrega um abridor, uma sebe e uma palavra listada, e reescrevendo-a para o & quot; O mercado está mudando." limpa todos os três.
O rótulo geral para este texto é o & quot; Leituras naturalmente", porque a média das seis pontuações cai logo abaixo do limite misto Esse resultado limítrofe é uma boa ilustração de por que o rótulo geral é um resumo dos sinais e não uma nota.
Como você deve usar um verificador de escrita, e como você não deve?
Use-o em seus próprios rascunhos, para encontrar quais parágrafos são lidos como estereotipados e para aprender como são os padrões Use-o ao editar o trabalho contribuído, como um ponteiro para onde uma edição leve ajudaria.
Não o use para decidir se um aluno trapaceou, se um freelancer usou um modelo ou se um candidato escreveu sua própria carta A página diz isso em uma caixa de aviso acima dos resultados, e o motivo vale a pena repetir: nenhum detector pode estabelecer autoria, falsos positivos caem mais duramente sobre escritores de segunda língua, e uma acusação construída sobre uma pontuação pode causar danos reais a alguém que não fez nada de errado Se a autoria realmente importa, fale com o escritor, olhe para rascunhos e histórico de revisões ou peça que explique seu raciocínio.
Também não há pontuação a ser almejada Se a variação for baixa, varie suas frases Se a cobertura for alta, corte as sebes Ambos melhoram a escrita de quem a escreveu.
Como você conserta o que o verificador encontra?
Cada sinal tem uma correção direta.
| Encontrando | Consertar |
|---|---|
| Variação de comprimento de frase baixo | Divida uma frase longa; mescle duas curtas; adicione uma frase muito curta para dar ênfase |
| Comprimento médio alto da frase | Quebre frases no & quot; e & quot;, & quot; qual & quot; e & quot; porque & quot; onde as cláusulas são independentes |
| Alta taxa de vocabulário | Troque cada palavra listada por uma simples: use, forte, chave, completo |
| Frases hedge | Exclua a frase; a frase significa a mesma coisa |
| Taxa alta do traço do em | Substitua os traços por pontos finais, vírgulas ou colchetes, o que a frase desejar |
| Abridores conectivos | Exclua o abridor; a ordem das frases já mostra a conexão |
Vários destes podem ser aplicados automaticamente O Humanizador de texto AI remove hedges e abridores, troca palavras usadas em excesso e substitui traços, e lista cada alteração para que você possa recusar aquelas que não se encaixam Ele não altera o comprimento da frase, então o burstiness ainda é uma edição manual Um loop prático é: verificar, humanizar, editar o ritmo da frase à mão e, em seguida, verificar novamente.
Se você quiser ver o quanto suas edições mudaram, cole o antes e o depois em um verificador diff do texto. Para alvos de comprimento em uma plataforma específica, o guia para contagem de palavras e tempo de leitura abrange como as contagens de palavras são calculadas e por que as ferramentas discordam.
Verificador de padrão vs detector AI vs pontuação de legibilidade
Essas três ferramentas respondem a perguntas diferentes e muitas vezes são confundidas.
| Tipo ferramenta | Pergunta que responde | produção | Confiável para |
|---|---|---|---|
| Detector IA | Um modelo escreveu isto? | Uma probabilidade ou veredicto | Nada consequente; a precisão é muito baixa |
| Verificador padrão | Quais hábitos estereotipados este texto tem? | Sinais medidos com evidências | Edição e auto-revisão |
| Pontuação de legibilidade (Flesch e similares) | Quão difícil é ler isso? | Um nível de nota ou pontuação de facilidade | Correspondência de texto a um público |
Uma fórmula de legibilidade e um verificador de padrões se sobrepõem no comprimento da frase, mas olhe para coisas diferentes além dela A pontuação de Flesch conta sílabas por palavra; o verificador de padrões conta palavras e construções específicas Usadas juntas, elas informam se um rascunho é difícil de ler e se é lido como modelado.
O texto é carregado ou armazenado?
Não. Toda medição é executada em JavaScript no seu navegador O texto não é transmitido, registrado ou armazenado, e a página funciona offline uma vez carregada Quando a caixa de texto perde o foco, a página registra um evento de uso contendo apenas a contagem de palavras, nunca o texto.
Isso importa para os documentos exatos que as pessoas mais desejam verificar: rascunhos não publicados, trabalhos de alunos, manuscritos e resultados de clientes As listas de palavras e limites são fixados na página, de modo que o mesmo texto sempre produz os mesmos números, o que torna os resultados reprodutíveis se dois editores compararem notas.
Para verificar um rascunho agora, cole-o no verificador de padrões de escrita, leia a evidência sob cada sinal, e fixe os dois ou três que mais importam.
