O Turnitin consegue verificar uma tese inteira?

O Turnitin não gera um relatório de escrita com IA para um envio com mais de 30.000 palavras, nem para um com menos de 300 palavras de prosa. Duas das suas próprias páginas de ajuda indicam os mesmos limites. Fora dessa faixa não há porcentagem: o indicador mostra um duplo travessão cinza, o que significa que o envio não pôde ser processado, não que tenha voltado limpo.

Uma tese completa normalmente fica bem acima do teto. Então, se você está pensando na "sua pontuação de IA da tese", a primeira pergunta é qual arquivo a produziu.

A primeira é uma página curta chamada Requisitos de arquivo para um AI Writing Report. A página inteira tem cerca de 700 caracteres. Ela começa com "In order for a submission to generate an AI writing report and percentage, the submission needs to meet the following requirements" (Para que um envio gere um relatório de escrita com IA e uma porcentagem, ele precisa atender aos seguintes requisitos) e depois os lista. Três deles decidem se um documento longo chega a ser pontuado:

• O tamanho do arquivo deve ser inferior a 100 MB
• O arquivo deve ter pelo menos 300 palavras de texto em prosa em um formato de escrita longa
• O arquivo não deve ultrapassar 30.000 palavras

O restante da lista cobre os idiomas compatíveis e os tipos de arquivo aceitos.

A segunda página são as Perguntas frequentes sobre os recursos de detecção de escrita com IA, que repetem os mesmos requisitos dentro da explicação sobre o que significam os indicadores do relatório. Mesmos números, mesma ordem.

Estar duas vezes no próprio site do fornecedor importa mais do que parece, porque a maior parte do que circula sobre os limites do Turnitin é um blog copiando outro blog.

As perguntas frequentes descrevem o que o indicador pode mostrar. Um indicador azul com um número entre 0 e 100 significa que o envio foi processado. Um asterisco significa que foi detectada IA na faixa de 1% a 19%, que o Turnitin mostra sem número e sem destaques, para evitar falsos positivos. E depois:

"Gray with no percentage displayed (- -): The AI writing detection indicator is unable to process this submission." (Cinzento sem porcentagem exibida (- -): o indicador de detecção de escrita com IA não consegue processar este envio.)

A página dá os motivos. Um é que o envio é anterior ao lançamento da detecção de escrita com IA, o que só se resolve reenviando. O outro é que o arquivo não cumpre os requisitos acima.

Um estado de erro separado, mostrado com um ponto de exclamação, significa que o Turnitin não conseguiu processar o envio e pede que você tente de novo ou fale com o suporte.

Então o travessão cinza numa tese de 60.000 palavras é o resultado esperado e não diz nada sobre a sua escrita. Vale saber qual dos três estados você tem à frente antes de tirar qualquer conclusão, especialmente se o que chegou a você foi uma captura de tela.

Na prática, um trabalho longo é enviado em partes: um capítulo ao orientador, uma seção ao comitê de acompanhamento, o arquivo final ao repositório. Cada um deles é uma previsão separada, e é aqui que a aritmética deixa de ser intuitiva.

O Turnitin descreve o mecanismo assim: dividir o envio em segmentos sobrepostos, pontuar cada segmento entre 0 e 1, fazer cada frase elegível herdar a pontuação dos segmentos que a contêm e, depois, reunir e agregar tudo isso no número do documento. As pontuações por capítulo não são fatias de uma pontuação da tese, porque essa pontuação não existe. São execuções separadas sobre quantidades diferentes de texto.

A ponta baixa da faixa se comporta de novo de outro jeito. O Turnitin diz que em documentos de apenas algumas centenas de palavras a previsão é basicamente "all or nothing" (tudo ou nada), porque há um único segmento e nenhuma sobreposição sobre a qual calcular a média; e que isso significa que um conteúdo misto num documento curto pode ser marcado como inteiramente gerado por IA. Uma introdução de 400 palavras enviada sozinha cai exatamente nessa zona. Um resumo sozinho não chega nem ao piso de 300 palavras de prosa.

Na outra ponta, as perguntas frequentes são francas sobre documentos longos: num documento mais extenso que mistura escrita autêntica e escrita gerada por IA, dizem, pode ser difícil determinar exatamente onde uma termina e a outra começa, e descrevem o resultado como um guia para começar uma conversa com o aluno.

Mesmo dentro da faixa, o número cobre menos do que você imagina. O Turnitin analisa o que chama de texto elegível, que define como frases em prosa: blocos escritos em frases gramaticalmente padrão. Listas, marcadores e outras estruturas que não são frases ficam de fora. As perguntas frequentes afirmam então, sem rodeios, que a porcentagem não é necessariamente a porcentagem de todo o envio, e que o texto não considerado prosa de formato longo não é incluído.

A definição deles de prosa de formato longo nomeia o formato diretamente: frases individuais contidas em parágrafos que compõem um trabalho escrito mais longo, como um ensaio, uma dissertação ou um artigo.

Agora pense num capítulo de método. Passos de procedimento numerados, uma tabela de parâmetros, equações, código, legendas de figuras. Muito pouco disso são parágrafos de frases. O denominador da porcentagem encolhe até as partes do seu texto com forma de discussão, que é também de onde vem a pontuação. Como ler um relatório de escrita com IA do Turnitin percorre a distância entre o número e o destaque.

O Turnitin não publica qual contador usa, e isso não é frescura, porque duas ferramentas contando o mesmo arquivo quase sempre discordam.

Os travessões são os culpados de sempre. O Word trata um travessão entre duas palavras como limite de palavra em algumas formas e não em outras, o que é demonstrado de forma clara num blog de redação jurídica da UT Austin usando um intervalo de páginas, e nós já vimos os nossos próprios contadores discordar do Word em documentos cheios deles.

A margem é pequena. Só importa num lugar, e é este: se o Word diz 29.800 e o que conta do outro lado diz algo um pouco maior, a diferença entre um relatório e um travessão cinza é um punhado de travessões. Perto do teto, divida o arquivo em vez de descobrir depois.

1. Pergunte qual arquivo foi enviado antes de interpretar qualquer pontuação. Um capítulo, uma tese compilada, um PDF gerado pelo portal e uma versão sem apêndices são quatro envios diferentes.
2. Trate um travessão cinza como "não processado". Não repasse isso para cima como um resultado limpo.
3. Não some as porcentagens dos capítulos nem tire a média delas. São previsões separadas sobre denominadores diferentes.
4. Espere que seções curtas se comportem mal. A própria explicação do Turnitin sobre a pontuação tudo ou nada em textos curtos é o motivo, não a sua escrita.
5. Lembre-se para que o fornecedor diz que o número serve. O Turnitin afirma em várias das suas próprias páginas que o modelo pode errar e não deve ser a única base para uma medida adversa contra um aluno, e em outro lugar chama a pontuação de um dado único, não de uma resposta definitiva. É uma frase justa para levar a uma reunião de orientação.

Se você já está nessa conversa e escreveu o texto você mesmo, sinalizado, mas foi você mesmo que escreveu mostra quais provas vale a pena reunir.

Duas coisas ficam caras na escala de um capítulo: o que você precisa reler depois e o que pagou para mandar reescrever. As duas são decididas pela mesma configuração: quanto do arquivo estava no escopo. Três parágrafos sinalizados e um capítulo inteiro são quantidades de revisão muito diferentes.

A ferramenta HumanPen funciona ao contrário. Você importa o relatório do Turnitin ou do iThenticate daquele capítulo, e as passagens sinalizadas se tornam o escopo: só aquele texto é reescrito, todo o resto fica intocado, e a cobrança conta as palavras efetivamente reescritas, não o documento que você enviou. Um parágrafo é a menor unidade que o motor toca, e uma seleção que cobre só parte de um é ampliada para o parágrafo inteiro e mostrada a você antes de o trabalho começar. Não há limite de palavras por solicitação no envio, então um capítulo entra como um único arquivo. Passagens elegíveis podem ser reprocessadas sem custo.

Nada disso é uma previsão sobre o seu próximo relatório. É uma afirmação sobre o que é tocado e o que é cobrado.

O Turnitin consegue verificar um documento com mais de 30.000 palavras? Não para escrita com IA. Tanto a página de requisitos de arquivo quanto as perguntas frequentes do Turnitin afirmam que um envio não deve ultrapassar 30.000 palavras para que um relatório de escrita com IA e uma porcentagem sejam gerados. A verificação de similaridade é um sistema separado, com comportamento próprio.

Minha tese voltou sem porcentagem de IA. Isso é bom? O mais provável é que nenhum relatório tenha sido gerado. Um duplo travessão cinza significa que o indicador não conseguiu processar o envio, e ultrapassar os requisitos de arquivo é um dos motivos que o Turnitin lista.

Por que a pontuação do meu capítulo é diferente da do arquivo que o meu orientador enviou? São execuções diferentes. As pontuações são calculadas sobre segmentos sobrepostos do que foi enviado, e a porcentagem cobre apenas a prosa elegível; então dois arquivos com as mesmas palavras podem gerar denominadores e números diferentes.

Existe um tamanho mínimo? Sim. O arquivo precisa de pelo menos 300 palavras de texto em prosa em um formato de escrita longa. O Turnitin também diz que as previsões em documentos de apenas algumas centenas de palavras tendem ao tudo ou nada, porque há um único segmento sem sobreposição sobre a qual calcular a média.