Turnitin può controllare una tesi intera?

Turnitin non genera un report sulla scrittura IA per un elaborato oltre le 30.000 parole, né per uno con meno di 300 parole di prosa. Due delle sue stesse pagine di assistenza indicano gli stessi limiti. Fuori da quell'intervallo non c'è percentuale: l'indicatore mostra un doppio trattino grigio, che significa che l'elaborato non ha potuto essere elaborato, non che sia tornato pulito.

Una tesi completa di norma supera di molto il tetto. Quindi, se stai ragionando sul «tuo punteggio IA della tesi», la prima domanda è quale file lo abbia prodotto.

La prima è una pagina breve intitolata Requisiti dei file per un AI Writing Report. L'intera pagina è di circa 700 caratteri. Si apre con «In order for a submission to generate an AI writing report and percentage, the submission needs to meet the following requirements» (Affinché un elaborato generi un report sulla scrittura IA e una percentuale, deve soddisfare i seguenti requisiti), poi li elenca. Tre di questi decidono se un documento lungo viene valutato o meno:

• La dimensione del file deve essere inferiore a 100 MB
• Il file deve contenere almeno 300 parole di testo in prosa in un formato di scrittura estesa
• Il file non deve superare le 30.000 parole

Il resto dell'elenco riguarda le lingue supportate e i tipi di file accettati.

La seconda pagina sono le FAQ sulle capacità di rilevamento della scrittura IA, che ripetono gli stessi requisiti nella spiegazione del significato degli indicatori del report. Stessi numeri, stesso ordine.

Che compaia due volte sul sito stesso del fornitore conta più di quanto sembri, perché gran parte di ciò che circola sui limiti di Turnitin è un blog che copia un altro blog.

Le FAQ descrivono ciò che l'indicatore può mostrare. Un indicatore blu con un numero tra 0 e 100 significa che l'elaborato è stato elaborato. Un asterisco significa che è stata rilevata IA nell'intervallo tra 1% e 19%, che Turnitin mostra senza numero e senza evidenziazioni, per evitare i falsi positivi. E poi:

«Gray with no percentage displayed (- -): The AI writing detection indicator is unable to process this submission.» (Grigio senza percentuale visualizzata (- -): l'indicatore di rilevamento della scrittura IA non riesce a elaborare questo elaborato.)

La pagina fornisce le ragioni. Una è che l'elaborato è precedente al rilascio del rilevamento della scrittura IA, cosa che si risolve solo ripresentandolo. L'altra è che il file non rispetta i requisiti indicati sopra.

Uno stato di errore separato, mostrato con un punto esclamativo, significa che Turnitin non è riuscito a elaborare il documento e ti invita a riprovare o a contattare l'assistenza.

Quindi il trattino grigio su una tesi da 60.000 parole è il risultato atteso e non dice nulla sulla tua scrittura. Vale la pena sapere quale dei tre stati hai davanti prima di trarre una conclusione qualsiasi, soprattutto se quello che ti è arrivato è uno screenshot.

In pratica, un lavoro lungo viene inviato a pezzi: un capitolo al relatore, una sezione alla commissione di avanzamento, il file finale nel repository. Ognuno di questi è una previsione distinta, ed è qui che l'aritmetica smette di essere intuitiva.

Turnitin descrive il meccanismo così: suddividere l'elaborato in segmenti sovrapposti, assegnare a ogni segmento un punteggio tra 0 e 1, far ereditare a ogni frase idonea il punteggio dei segmenti che la contengono, poi raccogliere e aggregare il tutto nel numero del documento. I punteggi dei capitoli non sono fette di un punteggio della tesi, perché il punteggio della tesi non esiste. Sono esecuzioni separate su quantità di testo diverse.

L'estremità bassa dell'intervallo si comporta di nuovo in modo diverso. Turnitin dice che nei documenti di poche centinaia di parole la previsione è per lo più «all or nothing» (tutto o niente), perché c'è un solo segmento e nessuna sovrapposizione su cui fare la media; e che questo significa che un contenuto misto in un documento breve può essere segnalato come interamente generato dall'IA. Un'introduzione di 400 parole inviata da sola rientra esattamente in quella zona. Un abstract da solo non raggiunge nemmeno la soglia minima di 300 parole di prosa.

All'estremità opposta, le FAQ sono schiette sui documenti lunghi: in un documento più lungo che mescola scrittura autentica e scrittura generata dall'IA, dice, può essere difficile determinare esattamente dove finisce l'una e inizia l'altra, e descrive il risultato come una guida per avviare una conversazione con lo studente.

Anche all'interno dell'intervallo, il numero copre meno di quanto pensi. Turnitin analizza ciò che chiama testo idoneo, definito come frasi di prosa: blocchi scritti in frasi grammaticalmente standard. Elenchi, elenchi puntati e altre strutture che non sono frasi ne restano fuori. Le FAQ affermano poi chiaramente che la percentuale non è necessariamente la percentuale dell'intero elaborato, e che il testo non considerato prosa di forma estesa non è incluso.

La sua definizione di prosa di forma estesa indica direttamente il formato: singole frasi contenute in paragrafi che compongono un lavoro scritto più lungo, come un saggio, una tesi di dottorato o un articolo.

Ora immagina un capitolo di metodo. Passaggi di procedura numerati, una tabella di parametri, equazioni, codice, didascalie delle figure. Ben poco di tutto questo è fatto di paragrafi di frasi. Il denominatore della percentuale si riduce alle parti del tuo testo che hanno la forma di una discussione, che è anche da dove arriva il punteggio. Come leggere un report sulla scrittura IA di Turnitin analizza lo scarto tra il numero e l'evidenziazione.

Turnitin non pubblica quale contatore usi, e non è una sottigliezza fine a sé stessa, perché due strumenti che contano lo stesso file finiscono regolarmente per non essere d'accordo.

I trattini sono i soliti colpevoli. Word tratta un trattino tra due parole come un confine di parola in alcune forme e non in altre, come dimostrato chiaramente su un blog di scrittura giuridica della UT Austin usando un intervallo di pagine; e noi abbiamo visto i nostri stessi contatori discostarsi da Word su documenti pieni di trattini.

Il margine è ridotto. Conta in un solo punto, ed è questo: se Word dice 29.800 e quello che conta dall'altra parte dice qualcosa di poco più grande, la differenza tra un report e un trattino grigio è una manciata di trattini. Vicino al tetto, dividi il file invece di scoprirlo dopo.

1. Chiedi quale file è stato inviato, prima di interpretare qualsiasi punteggio. Un capitolo, una tesi compilata, un PDF generato dal portale e una versione senza appendici sono quattro invii diversi.
2. Tratta un trattino grigio come «non elaborato». Non riportarlo verso l'alto come un risultato pulito.
3. Non sommare le percentuali dei capitoli e non farne la media. Sono previsioni separate su denominatori diversi.
4. Aspettati che le sezioni brevi si comportino male. La spiegazione che Turnitin stesso dà della valutazione tutto-o-niente sui testi brevi ne è la ragione, non la tua scrittura.
5. Ricorda a cosa il fornitore dice che serva il numero. Turnitin afferma in diverse sue pagine che il modello può sbagliare e che non deve essere l'unica base per un provvedimento sfavorevole a uno studente, e altrove definisce il punteggio un singolo dato più che una risposta definitiva. È una frase legittima da portare in un incontro con il relatore.

Se sei già dentro quella conversazione e l'hai scritto tu stesso, segnalato, ma l'hai scritto tu stesso tratta quali prove vale la pena raccogliere.

Due cose diventano costose alla lunghezza di un capitolo: ciò che devi rileggere dopo e ciò che hai pagato per far riscrivere. Entrambe dipendono dalla stessa impostazione, cioè quanto del file rientrasse nel perimetro. Tre paragrafi segnalati e un capitolo intero sono quantità di revisione molto diverse.

Lo strumento HumanPen funziona al contrario. Importi il report Turnitin o iThenticate di quel capitolo e i suoi passaggi segnalati diventano il perimetro: viene riscritto solo quel testo, tutto il resto resta intatto, e la fatturazione conta le parole effettivamente riscritte, non il documento che hai caricato. Il paragrafo è l'unità più piccola che il motore tocca, e una selezione che ne copre solo una parte viene estesa all'intero paragrafo e ti viene mostrata prima dell'avvio del lavoro. Non c'è un limite di parole per richiesta in fase di caricamento, quindi un capitolo entra come un solo file. I passaggi idonei possono essere rielaborati gratuitamente.

Nulla di tutto questo è una previsione sul tuo prossimo report. È un'affermazione su cosa viene toccato e cosa viene fatturato.

Turnitin può controllare un documento più lungo di 30.000 parole? Non per la scrittura IA. Sia la pagina dei requisiti dei file sia le FAQ di Turnitin affermano che un elaborato non deve superare le 30.000 parole perché vengano generati un report sulla scrittura IA e una percentuale. Il controllo della similarità è un sistema separato, con un comportamento proprio.

La mia tesi è tornata senza percentuale IA. È un bene? Molto probabilmente non è stato prodotto alcun report. Un doppio trattino grigio significa che l'indicatore non ha potuto elaborare il documento, e superare i requisiti dei file è una delle ragioni che Turnitin elenca.

Perché il punteggio del mio capitolo è diverso da quello del file inviato dal mio relatore? Sono esecuzioni diverse. I punteggi sono calcolati su segmenti sovrapposti di ciò che è stato inviato, e la percentuale copre solo la prosa idonea: due file che contengono le stesse parole possono quindi produrre denominatori e numeri diversi.

Esiste una lunghezza minima? Sì. Il file deve contenere almeno 300 parole di testo in prosa in un formato di scrittura estesa. Turnitin dice anche che le previsioni sui documenti di poche centinaia di parole tendono al tutto o niente, perché c'è un solo segmento senza sovrapposizione su cui fare la media.