Como comunicar um falso positivo ao Turnitin

O FAQ do Turnitin pede aos utilizadores que comuniquem falsos positivos. As palavras exatas são: "If you find AI written documents that we've missed, or notice authentic student work that we've predicted as AI-generated, please let us know! Your feedback is crucial in enabling us to improve our technology further." (Se encontrar documentos escritos por IA que nos tenham passado despercebidos, ou notar trabalhos autênticos de estudantes que tenhamos classificado como gerados por IA, por favor informe-nos! O seu feedback é fundamental para nos permitir continuar a melhorar a nossa tecnologia.) É o único canal oficial que a documentação pública do Turnitin menciona para sinalizar um falso positivo. O FAQ diz ainda que a pontuação de IA "should not be used as the sole basis for action," (não deve ser usada como única base para agir), que o modelo "may not always be accurate," (pode não ser sempre exato) e que há tipos de texto mais propensos a falsos positivos. Comunicar o falso positivo não altera a sua pontuação atual, mas dá ao Turnitin dados para melhorar as futuras atualizações do modelo.

O FAQ é direto:

"If you find AI written documents that we've missed, or notice authentic student work that we've predicted as AI-generated, please let us know! Your feedback is crucial in enabling us to improve our technology further." (Se encontrar documentos escritos por IA que nos tenham passado despercebidos, ou notar trabalhos autênticos de estudantes que tenhamos classificado como gerados por IA, por favor informe-nos! O seu feedback é fundamental para nos permitir continuar a melhorar a nossa tecnologia.)

Esta frase abrange duas direções. Pede que se comunique texto de IA que tenha passado despercebido (falsos negativos) e que se comunique trabalho autêntico de estudantes incorretamente sinalizado como IA (falsos positivos). Para o nosso caso, é a segunda direção que interessa. Se um trabalho escrito por si foi sinalizado como gerado por IA, a própria documentação do Turnitin pede que lhes dê conhecimento disso.

O FAQ descreve o tipo de texto mais propenso a falsos positivos:

"Sometimes false positives (incorrectly flagging human-written text as AI-generated), can include content without a lot of structural variation, text that literally repeats itself, or text that has been paraphrased without developing new ideas." (Por vezes, os falsos positivos — sinalizar incorretamente texto escrito por humanos como gerado por IA — podem incluir conteúdo com pouca variação estrutural, texto que se repete literalmente, ou texto parafraseado sem desenvolver ideias novas.)

A frase seguinte: "If our indicator shows a higher amount of AI writing in such text, we advise you to take that into consideration when looking at the percentage indicated." (Se o nosso indicador apresentar uma quantidade mais elevada de escrita por IA nesse tipo de texto, aconselhamos que tenha isso em consideração ao olhar para a percentagem indicada.)

Se o seu texto sinalizado corresponde a alguma destas descrições, então tem uma explicação concreta para o falso positivo. Pode citar a própria descrição do FAQ quando falar da sinalização com o seu docente, e pode citá-la quando comunicar o falso positivo ao Turnitin. O artigo Sinalizado, mas foi você quem escreveu mostra como montar essa conversa.

O FAQ afirma:

"Hence, we must emphasize that the percentage on the AI writing indicator should not be used as the sole basis for action or a definitive grading measure by instructors." (Por isso, temos de sublinhar que a percentagem no indicador de escrita por IA não deve ser usada como única base para agir nem como critério de avaliação definitivo por parte dos docentes.)

Uma página de orientação à parte acrescenta:

"It is not meant to provide definitive answers in isolation. More important than any tool is the educator who sees the score and makes decisions balancing this information with their personal knowledge of their students, their work, and institutional policy." (Não se destina a dar respostas definitivas de forma isolada. Mais importante do que qualquer ferramenta é o educador que vê a pontuação e toma decisões, ponderando esta informação com o conhecimento pessoal que tem dos seus alunos, do trabalho destes e da política da instituição.)

Estas afirmações dão-lhe dois motivos para agir. Primeiro: a pontuação é um dado entre outros, não um veredito. Segundo: o modelo pode falhar, e o Turnitin reconhece isso. Comunicar o falso positivo é o mecanismo oficial para dar a conhecer ao Turnitin que o modelo errou no seu caso concreto. A frequência com que se espera que erre é a conta feita em o que significa uma taxa de falsos positivos de 1% quando uma universidade submete 75 000 trabalhos.

Comunicar um falso positivo ao Turnitin não altera a sua pontuação atual. O relatório já foi gerado e, como confirmam as notas de lançamento do Turnitin, as atualizações do modelo "will not retroactively update previously-generated AI writing reports." (não atualizarão retroativamente os relatórios de escrita por IA já gerados.) O que a comunicação faz é fornecer dados que o Turnitin usa para melhorar as futuras atualizações do modelo. O FAQ diz: "Your feedback is crucial in enabling us to improve our technology further." (O seu feedback é fundamental para nos permitir continuar a melhorar a nossa tecnologia.) É um contributo a longo prazo, não uma solução imediata. Para a sua situação imediata, os passos mais práticos são falar da sinalização com o seu docente, citar as descrições de texto propenso a falsos positivos do FAQ, caso se apliquem, e trabalhar as passagens concretas que foram sinalizadas. Se a questão passar de uma conversa, que provas a sua universidade aceita é a via que efetivamente faz avançar o seu caso.

Para resumir o que vimos:

• O FAQ do Turnitin pede explicitamente aos utilizadores que comuniquem falsos positivos: "please let us know!" (por favor, informe-nos!)
• O FAQ lista os tipos de texto mais propensos a falsos positivos: pouca variação estrutural, repetição, paráfrase sem ideias novas.
• A pontuação não deve ser usada como única base para agir, segundo a própria documentação do Turnitin.
• Comunicar não altera a sua pontuação atual, mas contribui para a melhoria futura do modelo.
• Para agir já: fale com o seu docente e trabalhe as passagens sinalizadas.

Se tem um relatório do Turnitin que mostra quais as passagens sinalizadas, importe o relatório e trabalhe essas passagens concretas. As passagens elegíveis podem ser submetidas novamente sem custo.