Pragul minim de cuvinte pentru detectarea AI: câte cuvinte au nevoie Turnitin, GPTZero și altele
Ce declară Turnitin, GPTZero, ZeroGPT, Pangram și Sapling despre lungimea textului, ce a constatat un studiu TextPulse asupra a 25,561 de perechi de texte academice și ce trebuie făcut când un text este prea scurt pentru a primi un scor.
Numărul minim de cuvinte pentru detectorul AI depinde de instrument. Unele instrumente, precum Turnitin, au nevoie de cel puțin 300 de cuvinte de proză eligibilă, dar altele, precum ZeroGPT, recomandă să scrieți cel puțin 150 până la 200 de cuvinte pentru a produce un rezultat consecvent. Indiferent dacă detectorul dvs. afișează sau nu un rezultat sub câteva sute de cuvinte, rezultatul dvs. este mai puțin fiabil.
Unele oferă în continuare un procent pentru fiecare paragraf, iar scorurile tind să fie mai puțin precise pentru textele scurte. Cercetătorii de la TextPulse Research au testat acest lucru cu 25,561 de perechi de texte academice scrise de oameni și rescrierile lor AI. La 300 de cuvinte, au ajustat un clasificator pentru a detecta 95% dintre rescrierile AI. Acesta a semnalat, de asemenea, 33.9% dintre textele umane. La 25 de cuvinte, a semnalat 67.6%.
Câte cuvinte necesită detectarea AI?
Detectarea AI necesită câteva sute de cuvinte pentru a fi fiabilă, un rezultat stabil. Fiabilitatea scade cel mai rapid sub aproximativ 100 de cuvinte. Cea mai mare parte a fiabilității a fost stabilită în studiul TextPulse în jurul a 150 de cuvinte. După aceasta, acuratețea a crescut mai lent, de la 84.0% la 150 de cuvinte la 86.8% la 300 de cuvinte.
Alte cercetări indică praguri similare. Un sondaj din 2025 din Journal of Artificial Intelligence Research, citat în lucrarea TextPulse, adună cifrele raportate până acum. Clasificatorii statistici și cei ajustați fin au nevoie de ordinul a 100 de cuvinte pentru a funcționa cu acuratețe. Mai mulți detectoare standard au nevoie de aproximativ 120 de cuvinte pentru a atinge performanța completă, iar detectarea celor mai puternice modele necesită aproximativ 200 de cuvinte.
Pe măsură ce un detector vede mai multe tokenuri, părțile de cuvânt cu care lucrează un model lingvistic, devine mai ușor să se distingă textul uman de textul AI. Când un detector a văzut doar câteva tokenuri într-un răspuns scurt, nu există prea multe dovezi pentru niciuna dintre concluzii. Perplexity, burstiness și celelalte măsuri implicate sunt explicate în ghidul despre cum funcționează detectoarele AI.
Numărul minim de cuvinte pentru detectorul AI, după instrument: Turnitin, GPTZero și altele
Fiecare furnizor stabilește propriul prag sau propria orientare, iar nu toți folosesc aceeași unitate. Turnitin numără cuvintele de proză eligibilă. Alți furnizori recomandă o anumită lungime sau descriu cum se schimbă acuratețea pe măsură ce un text devine mai lung.
| Detector | Ce afirmă furnizorul despre lungimea textului |
|---|---|
| Turnitin | Cel puțin 300 de cuvinte de proză eligibilă înainte ca un scor AI să fie generat, față de un minim anterior de 150 de cuvinte, deoarece acuratețea crește odată cu mai mult text |
| GPTZero | Acuratețea se îmbunătățește pe măsură ce este trimis mai mult text. Documentele întregi sunt clasificate mai precis decât paragrafele, iar paragrafele mai precis decât propozițiile individuale |
| ZeroGPT | Se recomandă cel puțin 150 până la 200 de cuvinte pentru un rezultat stabil, iar 500 până la 1.000 de cuvinte sau mai mult îmbunătățesc și mai mult fiabilitatea. Fragmentele foarte scurte sau puternic editate "transportă mai puține semnale" |
| Pangram | Funcționează cel mai bine pe text mai lung, scris în propoziții complete. Compania recomandă să nu fie verificate listele scurte cu puncte sau textul foarte formularic |
| Sapling | Valorile publicate privind detectarea și falsul pozitiv se aplică textelor mai lungi. Textele mai scurte "pot avea rate diferite de acuratețe" |
Acesta este pragul minim pe care îl întâlnesc cei mai mulți studenți, deoarece Turnitin este detectorul integrat în multe platforme de învățare universitare. Nu se acordă niciun scor sub 300 de cuvinte de proză eligibilă în raportul de scriere AI. Segmentul care obține un scor sub acest prag și asteriscul pe care Turnitin îl afișează pentru scoruri sub 20% sunt prezentate în ghidul despre cum detectează Turnitin AI.
Un procent afișat pe ecran nu înseamnă că un text a îndeplinit lungimea recomandată de instrument, deoarece multe verificatoare pentru consumatori vor acorda un scor unui singur paragraf. În 2023, clasificatorul de text AI al OpenAI avea nevoie de un minim de 1.000 de caractere de intrare. OpenAI a declarat că era foarte nesigur pe texte scurte și l-a eliminat șase luni mai târziu din cauza ratei sale scăzute de acuratețe.
Acuratețea detectorului AI în funcție de lungimea textului: ce a constatat cercetarea TextPulse
Lucrarea TextPulse privind lungimea textului și fiabilitatea detectării AI analizează doar lungimea, desprinsă de toate celelalte caracteristici ale textelor. Setul de date include 25,561 de perechi de texte în care atât textul uman, cât și rescrierea sa AI au cel puțin 300 de cuvinte. Fiecare text a fost tăiat la 25, 50, 100, 150, 200, 250 și 300 de cuvinte. Pentru fiecare lungime în cuvinte, clasificatorul a fost antrenat și testat.
Aceleași texte apar la fiecare lungime, adică subiectul, disciplina și modelul AI sunt menținute constante. Rescrierile provin din opt combinații diferite de modele AI, repartizate pe șase familii de modele. Clasificatorul evaluează 45 de caracteristici de stil, precum lungimea cuvintelor și varietatea vocabularului. Acesta este un instrument de cercetare, lucrarea nu formulează nicio afirmație despre modul în care detectoarele comerciale ar putea folosi aceste caracteristici sau praguri. Consultați ghidul despre dacă detectoarele AI sunt precise pentru teste ale instrumentelor comerciale.
| Lungimea textului | Acuratețe | Texte umane semnalate în mod eronat când 95% dintre rescrierile AI sunt detectate | Rescrieri AI detectate când 1% dintre textele umane sunt semnalate în mod eronat |
|---|---|---|---|
| 25 words | 73.9% | 67.6% | 17.2% |
| 50 words | 78.2% | 58.8% | 28.0% |
| 100 words | 82.3% | 49.4% | 40.5% |
| 150 words | 84.0% | 44.1% | 47.9% |
| 200 words | 85.2% | 40.1% | 50.5% |
| 250 words | 86.1% | 36.7% | 54.2% |
| 300 words | 86.8% | 33.9% | 56.5% |
| Full text | 88.4% | 28.6% | 60.6% |
Pentru detectarea AI, acuratețea pentru text scurt este mai slabă în fiecare coloană a tabelului, iar coloana de acuratețe subestimează pierderea. Un verdict utilizabil necesită un scor apropiat de oricare dintre capetele scalei, iar textele mai scurte împing atât scorurile umane, cât și scorurile AI spre mijloc. Cu pragul stabilit pentru a surprinde 95% dintre rescrierile AI, clasificatorul marchează în mod eronat aproximativ jumătate dintre textele umane la 100 de cuvinte. Cu pragul stabilit pentru a marca doar 1% dintre textele umane, acesta surprinde 17.2% dintre rescrierile AI la 25 de cuvinte.
AUC, principala măsură din articol a modului în care clasificatorul separă cele două grupuri, a crescut de la 0.817 la 25 de cuvinte la 0.940 la 300 de cuvinte. Pe textele integrale, care au avut în medie 466 de cuvinte în cazul textelor umane, a ajuns la 0.950. Cea mai abruptă parte a acestei creșteri a apărut sub 100 de cuvinte, iar fiecare pas peste 150 de cuvinte a adăugat mai puțin.
De ce cresc falsurile pozitive la textul scurt
Un detector construit pe documente lungi are o rată a falselor pozitive mult mai mare pe cele scurte. Articolul a prezentat un clasificator care a fost antrenat pe texte integrale și folosit la pragul implicit pentru clasificarea textelor scurte. Rata falselor pozitive a sistemului pentru textele umane a variat de la 16.1% la 300 de cuvinte la 39.1% la 100 de cuvinte și 69.8% la 25 de cuvinte.
Detectarea rescrierilor AI s-a schimbat foarte puțin pe același interval, de la 88.4% la 300 de cuvinte la 92.4% la 25 de cuvinte. Erorile suplimentare au fost marcări false ale scrierii umane. Articolul descrie clasificatorul pe intrări scurte ca fiind sistematic părtinitor în sensul de a le numi AI.
Cauza este mecanică. Raportul tip-token, ponderea cuvintelor distincte dintr-un text, crește pe măsură ce un text devine mai scurt, deoarece un eșantion scurt oferă mai puține ocazii de a repeta un cuvânt. Textele umane din studiu au avut în medie un raport de 0.47 la lungime integrală și 0.87 la 25 de cuvinte. Rescrierile AI la lungime integrală au avut în medie 0.55.
Acest clasificator, antrenat pe texte integrale, va învăța că un raport de aproximativ 0.55 separă scrierea AI de scrierea umană. Fiecare text de 25 de cuvinte, indiferent cine l-a scris, este mult peste acest raport și este împins spre partea AI. Lucrarea arată că un detector implementat nu este reantrenat de fiecare dată când schimbați lungimea intrării. Ghidul despre rata de fals pozitiv publicată de Turnitin acoperă ce include acea cifră și ce omite.
Umanizează-ți propria lucrare
Transformă textul tău asistat de AI și fă-l să sune uman, fără a atinge cuvintele importante sau citările.
De ce textele scurte sunt greu de clasificat
Textele scurte oferă unui detector mai puțin din tot ceea ce măsoară. Mai puține cuvinte înseamnă mai puține tokenuri de comparat, iar mai puține propoziții înseamnă mai puțin ritm de măsurat. În studiu, un text de 25 de cuvinte a avut în medie 1.6 propoziții, un text de 50 de cuvinte 2.7 propoziții, iar un text de 300 de cuvinte 13.4 propoziții.
Variația lungimii propozițiilor, numită adesea burstiness, depinde de compararea propozițiilor între ele. În studiu, aceasta a separat textele umane și AI cu 0.71 deviații standard pe textele integrale și cu 0.31 la 100 de cuvinte. La 50 de cuvinte, diferența a fost practic zero. Un detector care se bazează pe burstiness are nevoie de mai multe propoziții pentru a o măsura în mod fiabil.
Mai mult din această putere se păstrează la nivelul cuvântului. Lungimea medie a cuvintelor și rata cuvintelor lungi au păstrat aproximativ două treimi din puterea lor de separare la 25 de cuvinte. Dar a existat și o creștere a suprapunerii: la 50 de cuvinte, scorurile pentru ambele grupuri tind să se grupeze spre centru. O proporție mare din fiecare grup ajunge în zona de suprapunere.
Formulările citate sau standard contează, de asemenea, mai mult într-un text scurt. Un răspuns de 50 de cuvinte are aproximativ trei propoziții, deci fiecare propoziție reprezintă aproximativ o treime din ceea ce vede detectorul. O definiție citată într-una dintre ele are o pondere mult mai mare decât aceeași propoziție într-un eseu de 2,000 de cuvinte.
Postări pe forumuri de discuții, rezumate, examene cu răspuns scurt și scrisori de intenție
Postări pe forumuri de discuții
O postare scrisă pentru o cerință de 200 de cuvinte este sub pragul de 300 de cuvinte al Turnitin, astfel că Turnitin nu îi oferă niciun scor AI. Alte instrumente o pot totuși evalua. La 200 de cuvinte, clasificatorul din studiu a etichetat în mod eronat 40.1% dintre textele umane atunci când a fost setat să detecteze 95% dintre rescrierile AI, față de 28.6% pe textele integrale.
Rezumate
Un rezumat de jurnal de 250 de cuvinte este aproape de pragul minim, iar rezumatele sunt texte dense, formale. Un studiu TextPulse anterior a constatat că textele umane pe care un clasificator le clasifică greșit sunt cele mai formale. Articolul despre lungime adaugă lungimea textului ca o a doua cauză distinctă a semnalelor false, iar un rezumat scurt și formal este expus ambelor. Dacă un rezumat este pus la îndoială, verificarea lucrării complete îi oferă detectorului lungimea pe care furnizorul său o recomandă.
Examene cu răspuns scurt
Răspunsurile de 50 până la 100 de cuvinte se încadrează în intervalul în care cifrele studiului scad cel mai rapid. La 50 de cuvinte, un clasificator setat să detecteze 95% dintre rescrierile AI a semnalat în mod fals 58.8% dintre textele umane. Lucrarea concluzionează că, sub 50 de cuvinte, nicio limită practică nu oferă rezultate utilizabile. Ea adaugă că a refuza să emită un verdict asupra unui text scurt este mai fiabil decât a-i atribui un scor.
Scrisori de intenție
O scrisoare de intenție de o pagină pentru un loc de muncă sau pentru o trimitere la un jurnal are câteva sute de cuvinte, iar o mare parte din ea urmează formulări stabilite. Pangram recomandă să nu fie verificate textele foarte formulaice. Dacă o scrisoare de intenție este verificată, tratați orice scor ca pe o estimare cu o marjă largă.
Ce trebuie făcut când textul dumneavoastră este sub pragul minim
Lăsați textul așa cum l-ați scris și oferiți în schimb context scorului. Acești pași se aplică atât autorului, cât și persoanei care revizuiește un scor.
- Nu umpleți textul cu adaosuri. Cuvintele suplimentare scrise pentru a atinge un prag minim schimbă piesa pe care vi s-a cerut să o scrieți, iar scorul descrie apoi versiunea umplută.
- Verificați documentul integral acolo unde puteți. Un eseu sau un capitol complet îi oferă detectorului lungimea recomandată, iar secțiunea scurtă este scorată ca parte a unui text mai lung.
- Uitați-vă la vizualizarea pe propoziții. Detectoarele care acordă scoruri propozițiilor arată ce linii determină rezultatul, iar într-un text scurt aceasta este adesea una sau două propoziții, cum ar fi o definiție citată.
- Păstrați ciornele și istoricul versiunilor. Ele arată cum s-a dezvoltat textul, iar un scor pe un pasaj scurt nu poate arăta acest lucru.
- Întrebați cum va fi folosit scorul. Un rezultat obținut pe un text sub lungimea recomandată de propriul furnizor este un semnal slab, iar un evaluator ar trebui să îl cântărească în acest fel.
Pentru personal, discuția din articol indică o regulă simplă: solicitați mai mult text sau nu oferiți niciun verdict sub o lungime stabilită. Pragul de 300 de cuvinte al Turnitin este un astfel de regulament. Odată ce există un raport complet, ghidul despre ce este un scor bun Turnitin explică modul de interpretare.
Cum gestionează TextPulse textul scurt
TextPulse nu folosește un detector AI și nu vinde scanări ale detectorului. TextPulse afișează un Human Score (0 to 100) după fiecare humanization. Acest scor este o estimare realizată în aplicație, pe baza profunzimii rescrierii, a varietății vocabularului, a distribuției tokenilor și a variației lungimii propozițiilor din textul dvs. Niciun detector nu a fost folosit pentru a calcula acest scor.
AI Humanizer necesită cel puțin 50 de cuvinte pentru fiecare humanization și procesează până la 500 de cuvinte per trecere pe Pro și 1,000 pe Plus. Document Humanizer poate funcționa cu un fișier .docx integral în limba engleză, de până la 15,000 de cuvinte. Necesită cel puțin 50 de cuvinte de text principal și păstrează titlurile, listele, tabelele, legendele și referințele exact așa cum sunt scrise. Ambele sunt concepute pentru a reduce scorurile AI pe schițele în care cursul sau jurnalul dvs. permite asistența AI.
Înainte de a lipi textul într-un detector, verificați-i lungimea folosind Word Counter gratuit. Acest instrument numără cuvintele, caracterele cu și fără spații, propozițiile și cuvintele unice, astfel încât să puteți compara un text cu un prag stabilit în oricare dintre unități. Toate detaliile despre studiul privind lungimea, scorurile pentru fiecare text și codul de analiză, sunt disponibile public pe Zenodo, iar hub-ul de cercetare listează studiul alături de celelalte lucrări TextPulse.
Întrebări frecvente
Turnitin are nevoie de cel puțin 300 de cuvinte de proză eligibilă înainte de a genera un scor AI, un prag pe care l-a ridicat de la 150 de cuvinte. Sub acest nivel, raportul de scriere AI nu afișează niciun scor. Pragul minim de cuvinte pentru detectarea AI diferă de la un instrument la altul, așa că verificați propriile indicații ale fiecărui furnizor înainte de a avea încredere într-un rezultat pentru un text scurt.
PhD in natural language processing, with years spent building NLP applications end to end. Moe works on text analysis: lexical and syntactic structure, and what separates machine-generated prose from human prose statistically. He has been experimenting with computational linguistics since the early days of NLTK, spaCy and WordNet, and still writes most of his tooling in Python.