Citazioni allucinate: verifica il tuo articolo prima dell'invio

Nell giugno 2023, un giudice federale di New York ha sanzionato due avvocati per aver depositato una memoria costruita su almeno sei casi giudiziari che non esistevano. Steven Schwartz aveva chiesto a ChatGPT precedenti a sostegno, aveva ricevuto nomi di casi e ragionamenti citati che sembravano tutti plausibili, e aveva depositato la memoria senza aprire personalmente nemmeno un caso. Il giudice P. Kevin Castel gli ha inflitto una multa di cinquemila dollari e ha ordinato una lettera a ogni giudice reale il cui nome era stato attribuito a un parere fabbricato.

Un elenco di riferimenti può finire nello stesso punto. La correzione consiste in un audit delle citazioni allucinate eseguito sul proprio elenco di riferimenti prima che lo faccia per voi un editor, un supervisore o un revisore. Non si tratta solo di un problema causato dalla stesura con un chatbot. Una citazione ricordata che in realtà non è mai esistita del tutto, il titolo di un coautore copiato in modo leggermente errato, oppure un preprint che ha modificato la propria citazione finale dopo l'accettazione possono tutti lasciare nello stesso elenco di riferimenti una lacuna dello stesso tipo di quella prodotta da una citazione fabbricata. L'audit seguente li individua tutti, indipendentemente da come sia arrivata lì una singola voce.

Quanto è comune, davvero, una citazione allucinata?

L'intervallo dipende in larga misura dal modello che ha prodotto la bozza. Walters and Wilder, pubblicando in Scientific Reports nel 2023, hanno testato elenchi di riferimenti generati da GPT-3.5 e GPT-4 rispetto a reali richieste di scrittura accademica: 636 citazioni tratte da 84 elenchi di riferimenti generati da AI, 42 per ciascun modello. Il cinquantacinque percento delle citazioni di GPT-3.5 era interamente fabbricato, contro il 18 percento di GPT-4. Anche quelle reali non erano necessariamente pulite: il 43 percento delle citazioni autentiche di GPT-3.5 e il 24 percento di quelle di GPT-4 presentavano ancora un errore sostanziale in qualche punto dell'autore, del titolo, dell'anno o della sede di pubblicazione.

La ricerca giuridica sulle citazioni generate da AI mostra un tasso di fallimento ancora più elevato, ma quel lavoro misura un fallimento diverso, cioè decisioni di casi allucinate, anziché riferimenti bibliografici fabbricati, quindi il dato non è da importare in un contesto accademico. Ciò che entrambi i campi condividono è la causa di fondo, un modello che produce una citazione plausibile sta ottimizzando ciò che una citazione di solito sembra, non il fatto che ne esista davvero una. Il pezzo di TextPulse su se ChatGPT inventa riferimenti si concentra specificamente su quel chatbot, questa verifica funziona indipendentemente dallo strumento, o dalla memoria del coautore, che ha prodotto la voce davanti a voi.

Cosa hanno rilevato gli audit su scala letteraria del 2026

Questi tassi a livello di modello descrivono ciò che esce da un chatbot. Una questione separata, e quella che conta per chiunque invii un manoscritto a una rivista, è quanto spesso un riferimento fabbricato superi ogni controllo tra una bozza e un articolo pubblicato. Due audit diffusi a un giorno di distanza l'uno dall'altro nel maggio 2026 hanno risposto a questa domanda su scala della letteratura, e la risposta è che il fallimento non è più raro.

Un audit pubblicato su The Lancet ha esaminato i riferimenti in circa 2,5 milioni di articoli biomedici su PubMed Central Open Access, coprendo il periodo da gennaio 2023 a febbraio 2026. Diverse migliaia di riferimenti rimandavano a lavori che non esistono, distribuiti in oltre 2.800 articoli pubblicati. La tendenza conta più del totale.

Periodo	Articoli con almeno un riferimento fabbricato	Per 10.000 articoli
2023	1 su 2.828	3.5
2025	1 su 458	21.8
2026, prime sette settimane	1 su 277	36.1

Si tratta approssimativamente di un aumento di dieci volte nell’arco di tre anni, e il dato del 2026 è ricavato da sette settimane anziché da un anno intero, quindi si tratta di una lettura preliminare e non di un tasso annuo consolidato. Ciò che stabilisce è che riferimenti inventati stanno arrivando in stampa in sedi sottoposte a peer review, dopo essere passati attraverso autori, coautori, editor e revisori.

Lo studio complementare, Zhao and colleagues on non-existent citations, ha ampliato il campione a 111 million references su arXiv, bioRxiv, SSRN e PubMed Central e ha fissato un limite minimo prudente di 146,932 citazioni allucinate per il solo 2025. Il suo risultato più utile riguarda la distribuzione più che il volume: i riferimenti inventati si concentrano nei settori con una rapida adozione di AI e tra piccoli gruppi di autori e autori all’inizio della carriera. Se siete un autore singolo o un piccolo gruppo senza un ufficio di ricerca che controlli la vostra bibliografia, fate parte del gruppo in cui questo errore si verifica più spesso, il che è un argomento per eseguire voi stessi il controllo invece di presumere che lo farà qualcuno più avanti nella catena.

Quali modelli inventano di più, e cosa lo riduce davvero

La risposta onesta è che non esiste alcun benchmark pubblico rigoroso che classifichi i principali modelli odierni l’uno rispetto all’altro in modo specifico per la fabbricazione di citazioni. Circolano piccoli confronti informali, di solito poche decine di riferimenti passati a mano attraverso due o tre chatbot, e i campioni sono troppo esigui per sostenere una classifica tra loro. Trattarne uno come una classifica è il modo in cui un’affermazione sicura ma errata finisce in un articolo.

Ciò che invece regge è il confronto generazionale nei dati di Walters e Wilder sopra, dove il modello più recente ha inventato citazioni con una frequenza circa pari a un terzo di quella del modello più vecchio.

Model tested	Citations entirely fabricated	Genuine citations still carrying a substantive error
GPT-3.5	55%	43%
GPT-4	18%	24%

Tre schemi si ripetono nella letteratura e valgono più di qualsiasi singola classifica. I modelli più grandi inventano meno dei modelli più piccoli. I modelli che possono davvero cercare e recuperare fonti inventano sostanzialmente meno dei modelli che rispondono soltanto a partire dai propri parametri, e questo è il singolo effetto più ampio che chiunque abbia misurato. Inoltre, le fonti oscure sono molto più rischiose di quelle note, perché un articolo molto citato compare spesso nei dati di addestramento abbastanza da essere riprodotto correttamente, mentre una fonte di nicchia ha più probabilità di essere ricostruita a partire da frammenti.

La lettura pratica è che nessun modello è abbastanza sicuro da saltare il controllo, e le voci più probabilmente errate sono esattamente quelle che si è meno in grado di verificare a memoria, la citazione specialistica, l'articolo di conferenza poco noto, la fonte aggiunta per ultima.

Cosa rileva un controllo automatizzato e dove si ferma

Passare prima l'elenco attraverso un verificatore è più rapido che risolvere a mano quaranta DOI, e il verificatore gratuito di citazioni AI di questo sito fa esattamente questo su Crossref, OpenAlex e Semantic Scholar. Vale la pena sapere che cosa fa male questa classe di strumenti prima di farvi affidamento.

Una valutazione del 2026 di cinque rilevatori di citazioni allucinate, Badalova and Mayr, ha rilevato che forniscono utili avvisi precoci ma restano limitati da quattro fattori, l'estrazione pulita delle referenze da un documento, i metadati incompleti nella voce stessa, la copertura discontinua dei database e registri che non concordano tra loro. Solo il primo di questi scompare quando si incolla un elenco invece di caricare un PDF.

La conseguenza per il proprio controllo è una regola di interpretazione. Un verificatore è più forte nel rilevare l’elemento che conta di più, un DOI che risolve a un articolo diverso da quello dichiarato dalla voce, il che è quasi conclusivo. È più debole su libri, capitoli, tesi, atti, lavori molto recenti e sedi non in inglese, tutti elementi che sono indicizzati in modo scarso ovunque e che regolarmente risultano non trovati pur essendo perfettamente autentici. Non trovato è un invito a controllare manualmente, mai un verdetto. I passaggi manuali qui sotto sono quelli da applicare a tutto ciò che il controllo automatico non è riuscito a stabilire.

Risolvi ogni DOI prima di inviare

Un DOI, un Digital Object Identifier, dovrebbe risolversi in un solo record tramite il risolutore doi.org. Aggiungi il DOI dal tuo elenco di riferimenti al risolutore e uno funzionante porta alla pagina dell'editore per quell'articolo esatto. Un DOI che si risolve in un articolo non مرتبط, in una rivista del tutto diversa, o in nulla, è uno dei controlli di allucinazione più rapidi disponibili, perché un modello che inventa una citazione di solito inventa anche una stringa DOI plausibile da abbinarle, invece di riutilizzarne una reale.

Un DOI che si risolve correttamente non è una prova automatica che la citazione sia autentica. Alcuni riferimenti fabbricati prendono in prestito il DOI reale di un articolo non correlato, che si risolve senza errore e rimanda a un articolo reale che non ha nulla a che vedere con l'affermazione che dovrebbe sostenere. Leggi la pagina a cui il DOI porta, non solo il fatto che si sia caricata.

Confronta ogni titolo con un database reale

Cerca il titolo esatto, tra virgolette, in una banca dati che copra il tuo settore, non nel web aperto. Usa qualcosa come Crossref, PubMed per il lavoro biomedico, oppure l'indice specifico della tua disciplina. Se usi Crossref, puoi usare la loro ricerca gratuita come ospite per cercare un riferimento per titolo e primo autore, oppure per autore e numero di pagina se non sei sicuro del titolo. Questo restituirà il DOI e i metadati completi di tutto ciò che hanno registrato. Se non c'è corrispondenza, oppure se ciò che compare è un articolo reale con un insieme di autori del tutto diverso, potresti trovarti di fronte al secondo tipo di allucinazione, un DOI rotto.

Una ricerca per titolo intercetta un guasto specifico che un controllo del DOI non rileva, una citazione con un DOI funzionante e reale associato al titolo sbagliato, perché il numero e il testo sono stati assemblati separatamente e non sono mai stati effettivamente verificati l'uno rispetto all'altro. Se il titolo nella banca dati non corrisponde da vicino al titolo della tua bibliografia, trattalo come una falsificazione finché non puoi spiegare la discrepanza, non come un refuso da correggere in silenzio.

Confronta l'elenco degli autori e l'anno di pubblicazione

Una citazione allucinata spesso indovina l'autore ma sbaglia l'articolo, perché un nome reale e noto nel settore è esattamente ciò che produrrà un modello che cerca una citazione plausibile. Cerca nell'elenco delle pubblicazioni dell'autore, nella banca dati che hai già aperto, l'anno indicato dalla tua bibliografia. Se quell'autore ha pubblicato tre articoli in quell'anno e nessuno corrisponde al tuo titolo, la citazione è molto probabilmente inventata, costruita a partire da un nome reale e da un anno reale che in realtà non sono mai andati insieme.

Si presenta anche il modello inverso, un articolo reale, con titolo corretto, associato all'anno sbagliato, di solito l'anno di un preprint invece dell'anno della pubblicazione finale, oppure una versione da conferenza citata con l'anno di pubblicazione successivo della rivista. Nessuno dei due casi è una falsificazione nel senso rigoroso dell'audit, ma entrambi mandano il lettore a un gestore di citazioni o a un coautore che poi non riesce a trovare ciò che hai citato, abbastanza vicino allo stesso problema da correggere nello stesso passaggio.

Individua un nome di rivista plausibile ma inventato

Un nome di rivista inventato è costruito per suonare esattamente come uno reale: un ambito plausibile, un aggettivo plausibile, un nome abbastanza vicino a una rivista effettiva da non indurre nessuno a fermarsi per controllare. "The Journal of Applied Cognitive Studies" è inventato; "The Journal of Applied Psychology" e "Journal of Cognitive Science" esistono entrambi, e un nome che incolla insieme parti dei due risulta familiare proprio per questo motivo.

Cerca il nome della rivista da solo, tra virgolette, e verifica la pagina della rivista sul sito del suo editore e un ISSN attuale, non solo un risultato su qualche altro sito che cita la stessa referenza. Una rivista reale ha una homepage che elenca un editor, un volume e un fascicolo attuali, e un ISSN legittimo registrato a suo nome. Un nome senza pagina dell'editore, senza ISSN e senza altri articoli che citino lavori provenienti da essa è il segnale più chiaro in tutto l'audit che la referenza non esiste.

Trasforma il tuo audit delle citazioni allucinate in una checklist ripetibile

Esegui questi controlli in ordine, su ogni referenza, prima che l'elenco sia considerato definitivo. L'ordine conta meno del coprirli tutti e quattro, una citazione può superare un controllo e fallirne comunque un altro.

Controllo	Cosa individua
Risoluzione del DOI	Un DOI che non porta da nessuna parte, o a un articolo non مرتبط
Corrispondenza tra titolo e database	Un DOI reale associato al titolo sbagliato, o un titolo che non restituisce alcun risultato
Verifica incrociata autore più anno	Il nome di un autore reale associato a un articolo che non ha scritto in quell'anno
Verifica del nome della rivista	Una rivista dal suono plausibile ma senza ISSN, senza pagina dell'editore e senza esistenza reale

Il controllore di citazioni AI di TextPulse esegue automaticamente una versione di questo passaggio su un elenco completo di riferimenti, più rapidamente che svolgere a mano ciascuno dei quattro controlli su una bibliografia lunga, anche se leggere ciò che segnala resta comunque utile, invece di accettare o rifiutare un segnale sulla fiducia. Per il passaggio DOI in particolare, una ricerca da DOI a citazione dedicata evita di dover passare al resolver per ogni voce, una alla volta.

Una bibliografia pulita è uno dei diversi controlli da effettuare prima che un manoscritto venga inviato. La riduzione di un punteggio AI per la sottomissione a una rivista è trattata separatamente, e lo stesso vale per la lettera di risposta ai revisori che la segue.

Nulla di tutto questo sostituisce una rilettura del proprio articolo un'ultima volta prima dell'invio. Se una sezione continua a sembrare generica dopo che i fatti sono stati verificati, un umanizzatore AI può rendere più scorrevole la prosa senza toccare una sola citazione; la guida di TextPulse all'umanizzazione del testo AI nella scrittura accademica tratta questo passaggio sezione per sezione. Un elenco di riferimenti che si risolve correttamente e un manoscritto che suona come la propria voce sono due controlli separati, che vale la pena eseguire uno dopo l'altro invece di affidarsi al fatto che uno copra l'altro.