Perché i rilevatori di AI sono di parte contro gli scrittori non madrelingua di inglese

I rilevatori di AI sfavorevoli ai parlanti non nativi non sono una lamentela soggettiva. Uno studio di Stanford del 2023, sottoposto a revisione paritaria, lo ha misurato direttamente. I ricercatori hanno testato sette rilevatori GPT ampiamente usati su 91 saggi TOEFL reali scritti da parlanti non nativi di inglese e su 88 saggi scritti da studenti americani di ottava classe, quindi hanno confrontato i punteggi ottenuti da ciascun gruppo.

I rilevatori hanno letto correttamente quasi sempre i saggi di ottava classe. Nei saggi TOEFL, scritti da adulti che avevano già superato un esame di competenza in inglese di livello universitario, gli stessi sette strumenti hanno restituito un tasso medio di falsi positivi del 61.22 percento. Ottantanove dei novantuno saggi, quasi il 98 percento, sono stati segnalati come generati da AI da almeno uno dei sette strumenti.

La panoramica di TextPulse delle prove più ampie sull'accuratezza dei rilevatori di AI copre questo risultato principale e le cause legali in cui esso è poi confluito. Ciò che viene omesso quasi ovunque si citi lo studio è il meccanismo: perché la prosa di chi parla inglese a livello universitario viene letta, in primo luogo, come prodotta da una macchina, e che cosa cambia quando smette di essere letta in questo modo.

I rilevatori di AI sfavorevoli ai parlanti non nativi: il meccanismo

Un rilevatore non legge mai per il significato. Legge in base a quanto è prevedibile ciascuna parola, date le parole che la precedono, e assegna un punteggio basso a un passaggio quando il modello avrebbe potuto indovinarne gran parte in anticipo. La diversità lessicale, cioè quanto ampio è il vocabolario a cui uno scrittore attinge invece di ripetere un insieme più ristretto di parole sicure, e la prevedibilità sintattica, cioè quanto la struttura della frase segue il modello più comune della lingua invece di variarlo, sono due proprietà della produzione linguistica che fanno scendere quel punteggio.

La distinzione conta perché i due elementi si manifestano in modo diverso sulla pagina. La diversità lessicale riguarda le parole stesse: uno scrittore che ricorre a 'obtain,' 'acquire,' e 'secure' in tre frasi diverse appare più vario di uno che scrive 'get' tre volte, anche quando le frasi sono altrimenti identiche. La prevedibilità sintattica riguarda la struttura: soggetto, verbo, oggetto, ripetuti ancora e ancora, invece di una frase che si apre con una proposizione subordinata o termina con una parola inattesa. Uno scrittore di seconda lingua che lavora in condizioni d'esame ha ogni motivo per adottare la versione più sicura di entrambe.

La scrittura in seconda lingua mostra in modo affidabile meno di entrambe, e non come una carenza. Uno scrittore che opera in una lingua aggiuntiva si appoggia al lessico e ai modelli di frase più probabilmente corretti, perché sbagliare costa di più quando la lingua non è ancora del tutto automatica. L'articolo di Stanford che ha documentato il bias del detector cita un insieme di ricerche di linguistica applicata su esattamente questo schema, stabilito ben prima che esistessero i detector di AI: ridotta ricchezza lessicale, ridotta diversità lessicale e struttura della frase più semplice sono caratteristiche documentate e misurabili della scrittura in seconda lingua, non il segno di altro.

Quel divario tra scrittura nativa e non nativa emerge come una differenza di perplexity, la stessa misurazione che un detector esegue per decidere se un passaggio sia stato generato da una macchina. Una perplexity più bassa appare più simile a quella di una macchina, indipendentemente da chi l'abbia prodotta, e la scrittura non nativa si colloca più in basso su quella scala per ragioni che non hanno nulla a che fare con un chatbot. Se quel divario sia davvero ciò che guida i detector, piuttosto che una coincidenza, è una questione verificabile. Il team di Stanford l'ha testata direttamente.

Cosa è accaduto quando gli stessi saggi sono stati riscritti con un vocabolario più ricco

I ricercatori presero gli stessi 91 saggi TOEFL che avevano provocato un tasso medio di falsi positivi del 61.22 percent e chiesero a ChatGPT di revisionarli usando una sola istruzione: "Enhance the word choices to sound more like that of a native speaker." Non fu indicato di modificare nulla del contenuto, dell'argomentazione o della grammatica. Dopo quella singola modifica, il tasso medio di falsi positivi sui medesimi sette detector scese all'11.77 percent, un calo di quasi cinquanta punti percentuali, e il numero di saggi che ogni detector segnalò all'unanimità scese da diciotto a uno.

I ricercatori poi invertirono l'esperimento. Presero gli 88 saggi di ottavo grado di parlanti nativi, che i detector avevano inizialmente valutato correttamente quasi ogni volta, e chiesero a ChatGPT di semplificarne le scelte lessicali come se fossero stati scritti da un parlante non nativo. Il tasso medio di falsi positivi su quegli stessi saggi scritti da nativi passò dal 5.19 percent al 56.65 percent. I saggi non cambiarono autore. Cambiò solo il vocabolario, e i detector seguirono il vocabolario.

La perplexity si mosse in perfetta corrispondenza con il tasso di misclassificazione in entrambe le direzioni: aumentò nettamente quando i saggi TOEFL furono arricchiti, e diminuì nettamente quando i saggi di ottavo grado furono semplificati. Gli autori traggono da ciò una conclusione netta: a cui i detector rispondevano davvero non era mai l'autorialità. Era la scelta delle parole, una proprietà che il vocabolario di qualsiasi scrittore può portare con sé, indipendentemente da dove abbia imparato l'inglese.

Quanto è coerente il bias tra detector diversi

I sette detector concordavano su ben poco, tranne che sulla direzione dell'errore. Ognuno di essi segnalò i saggi TOEFL molto più spesso dei saggi di ottavo grado, ma con margini molto diversi.

Rilevatore	Tasso di falsi positivi, saggi TOEFL	Tasso di falsi positivi, saggi nativi
Originality.ai	76%	1%
Quil.org	75%	9%
Sapling	68%	5%
Rilevatore di OpenAI	58%	9%
Crossplag	52%	12%
GPTZero	52%	0%
ZeroGPT	48%	0%

Questi sono dati del 2023, misurati sugli strumenti così come esistevano allora. Da allora diversi sono cambiati completamente: OpenAI ha chiuso il proprio rilevatore nel luglio 2023, quattro mesi dopo questo test, dopo aver scoperto che identificava correttamente solo il 26 percento del testo effettivamente scritto da AI, pur continuando a etichettare erroneamente il 9 percento della scrittura umana. Ciò che non è cambiato è la direzione del divario. Un benchmark di bias più ampio, costruito appositamente per testare i rilevatori attraverso categorie demografiche e linguistiche, pubblicato nel dicembre 2025 e applicato a quattro strumenti open source più recenti, ha comunque riportato un richiamo costantemente più basso per i gruppi di scrittori sottorappresentati.

Questo bias compare ancora nei rilevatori più recenti?

Lo studio di Stanford ha ormai diverse generazioni di AI, e i suoi stessi autori ne hanno indicato il limite: un piccolo campione pilota, e rilevatori costruiti soprattutto su GPT-2, un modello molto più piccolo e più vecchio di quello che alimenta il rilevamento oggi. Questo solleva una domanda legittima. Una tecnologia migliore ha colmato il divario?

Il test dedicato più recente dice di no, non ancora. In uno studio del febbraio 2026 della Sultan Qaboos University, i ricercatori hanno testato due rilevatori commerciali attuali, Turnitin e Originality, su 192 testi che mescolavano scrittura autentica di studenti EFL precedente a ChatGPT, scrittura umana professionale, testo generato da AI e testo ibrido umano-AI. I risultati hanno mostrato un'accuratezza complessiva del 69 percento e del 61 percento per i due strumenti, con un'accuratezza nella categoria ibrida, il tipo di scrittura che produce davvero un passaggio di revisione, scesa quasi a zero. Lo stesso studio ha inoltre rivelato un secondo bias che correva accanto a quello linguistico: l'accuratezza sulla scrittura scientifica era inferiore di 28 to 38 punti percentuali rispetto alla scrittura umanistica.

Nessuna delle due risultanze riguarda un singolo prodotto difettoso. Due architetture di rilevatori diverse, testate a tre anni di distanza su corpora diversi da team di ricerca diversi, continuano a giungere allo stesso risultato: la scrittura modellata dalla convenzione di genere o da una seconda lingua si colloca più vicino a ciò che questi strumenti chiamano prodotto della macchina rispetto alla scrittura che non lo è. Gli strumenti gratuiti di TextPulse consentono a uno scrittore di controllare quel medesimo profilo statistico prima che uno qualsiasi di questi elementi raggiunga il rilevatore di un'istituzione.

Prove indipendenti che il divario è reale, non un artefatto del test

Il primo problema con i risultati del TOEFL è che si potrebbe sostenere che si applichino solo a un piccolo studio pilota del 2023. La stessa équipe di ricerca ha risposto a questo in un altro studio che utilizza dati che non hanno nulla a che fare con i rilevatori. Hanno esaminato 1,574 articoli accettati a ICLR 2023, una importante conferenza di machine learning, limitando il campione agli abstract presentati e valutati prima che ChatGPT esistesse.

Gli autori con base in paesi in cui l'inglese non è la lingua principale hanno scritto abstract con una perplexity significativamente più bassa rispetto agli autori con base in paesi anglofoni nativi, e la differenza è rimasta anche dopo aver controllato quanto ogni articolo fosse stato valutato dai revisori. Questo campione non avrebbe potuto essere influenzato da qualcuno che cercava di sembrare più o meno simile a un chatbot. ChatGPT era a tre mesi dal rilascio quando si è chiusa la finestra di invio. Il divario di perplexity tra la scrittura accademica di parlanti nativi e non nativi non è qualcosa che i detector hanno inventato. È qualcosa che hanno ereditato.

Un'analisi statistica del 2026 del rilevamento dell'AI come problema di test offre una versione formale della stessa conclusione. Ogni volta che un gruppo di autori produce un linguaggio che si sovrappone, nel complesso, al tipico output dell'AI, qualsiasi detector con una reale capacità di individuare testo scritto dall'AI deve presentare per quel gruppo specifico un tasso più alto di falsi positivi, una proprietà matematica del test di una popolazione diversificata piuttosto che un difetto di uno strumento in particolare. Gli autori non nativi di inglese sono il caso documentato più chiaro di esattamente questa sovrapposizione.

Cosa significa questo per gli autori in una seconda lingua

Niente di tutto questo è un argomento per scrivere meno come se stessi. È un motivo per sapere che cosa viene effettivamente misurato prima che arrivi un punteggio. Un detector che legge la tua prosa come prevedibile sta rilevando una reale proprietà statistica della scrittura in seconda lingua, non una prova che hai usato uno strumento che non hai usato.

I ricercatori di Stanford che hanno condotto lo studio originale osservano una conseguenza scomoda della loro stessa scoperta: lo stesso aggiustamento del lessico che riduce il rischio di falsi positivi è anche il tipo di revisione che un autore potrebbe volere per ragioni del tutto separate, una formulazione più chiara, una parola più precisa, indipendentemente da qualsiasi detector. La pagina di TextPulse per autori accademici ESL illustra che aspetto ha questo tipo di revisione su frasi reali, separatamente da qualsiasi cosa abbia a che fare con un punteggio di rilevamento.

I rilevatori più recenti stanno iniziando a tenere conto esplicitamente di questo schema. Pangram, uno degli ingressi commerciali più recenti, afferma nella propria documentazione tecnica che il suo classificatore non è distorto contro gli scrittori di inglese non madrelingua, anche se tale affermazione proviene dal fornitore e non da test indipendenti. Un controllore gratuito di perplexity mostra la stessa misurazione di base che uno qualsiasi di questi strumenti calcola a partire da un testo, senza inviare prima la bozza altrove.

Due compagni pratici si collocano nello stesso gruppo: quando usare a, an e the, che è la singola fonte più comune dello schema, e come suonare naturale nella scrittura accademica in inglese più in generale.

La ricerca continua ad accumularsi nella stessa direzione a distanza di due anni, tra team diversi, rilevatori diversi e diversi disegni di test. Ciò che non ha tenuto il passo è una risposta istituzionale ampiamente adottata: verificare un rilevatore rispetto a una gamma di scrittori prima di fidarsi di esso per uno qualsiasi di loro, invece che dopo che uno studente specifico è già stato accusato. Finché questo non diventerà routine, l'onere di dimostrare che un falso positivo è errato ricade proprio sugli scrittori che questa ricerca indica come i più probabili destinatari di uno.