Sari la conținut

Cât de precis este Detectorul AI ZeroTell?

Pe setul nostru de test ținut deoparte de 1.826 documente în 10 limbi, detectorul a semnalat 4 din 671 documente scrise de oameni ca fiind AI (0,6 %) și a recunoscut 90,6 % dintre cele scrise de AI. Pe textul parafrazat de un alt model se descurcă mult mai slab, iar niciun scor nu dovedește cine a scris ceva.

Răspunsul scurt

Detectorul AI ZeroTell trimite fiecare propoziție a unui text către modelul Gemini 3.8 Flash de la Google, împreună cu instrucțiunile noastre de punctare. O propoziție care primește 50% sau mai mult este evidențiată ca fiind de tip AI, iar scorul documentului este proporția din textul său care se află în propoziții evidențiate. Pe 28 octombrie 2026 am măsurat exact modelul și setările folosite de site pe trei seturi de test etichetate. Fiecare cifră de mai jos provine direct din raportul de evaluare generat de scriptul nostru de testare; cităm doar grupurile cu cel puțin 200 de documente sau propoziții.

Două rezultate contează cel mai mult. Scrisul uman este rareori semnalat: 0,6 % dintre documentele umane din setul ținut deoparte și 0,9 % dintre eseurile scrise de studenți care nu sunt vorbitori nativi de engleză. Însă textul AI parafrazat de un alt model este ratat mult mai des în datele noastre: doar 71,1 % dintre astfel de documente au fost prinse în setul ținut deoparte. Pe benchmark-ul public MAGE, același tip de text a fost prins mult mai des (96,9 %), așa că rezultatele depind puternic de text.

Rezultate pe seturi de test (la nivel de document)

Un document este considerat scris de AI atunci când scorul său este de 50% sau mai mare, adică atunci când cel puțin jumătate din textul său se află în propoziții evidențiate. Un document de test mixt este considerat scris de AI atunci când cel puțin jumătate din textul său a fost scris de AI. Rata de fals pozitive = documente umane semnalate greșit ca AI. Rata de detectare = documente AI semnalate corect. AUROC (0,5 = ghicit, 1,0 = separare perfectă) nu depinde de prag.

Set de testDocumenteDocumente umane semnalate ca AIDocumente AI detectateAUROC
Set de test ținut deoparte (10 limbi)1.8260,6 % (4 din 671)90,6 %0,954
Eseuri de studenți (vorbitori non-nativi de engleză)5550,9 % (2 din 222)98,2 %0,992
Benchmark public MAGE (în afara distribuției)1.5990,3 % (1 din 399)96,6 %0,990

Ce tip de text AI este ratat

Rata de detectare la pragul de 50%, împărțită după modul în care a fost produs textul AI. Grupurile cu mai puțin de 200 de documente sunt excluse.

Set de testText AI, needitatText AI parafrazat de un alt model
Set de test ținut deoparte97,3 %71,1 %
Benchmark public MAGE96 %96,9 %

Rezultate la nivel de propoziție pe limbi

Detectorul evidențiază o propoziție atunci când scorul ei este de 50% sau mai mare. Set de test ținut deoparte; fiecare limbă de mai jos are cel puțin 200 de propoziții.

LimbăPropozițiiPropoziții umane evidențiatePropoziții AI evidențiateAUROC
Engleză8.4850,6 %91,1 %0,986
Chineză5.7620,1 %92,3 %0,980
Japoneză1.5881,6 %97,7 %0,996
coreeană8770 %87,4 %0,987
spaniolă1.1660 %96,2 %0,984
germană1.1091,5 %73,5 %0,901
italiană1.0380 %99,1 %1,000
portugheză9800 %91,4 %0,993
malaieză1.2050 %81,6 %0,982
turcă1.4131,6 %88,6 %0,986

Cele trei seturi de testare

Set de testare held-out (1.827 documente, 23.635 propoziții): o parte fixă din datele noastre etichetate, pe care nu o folosim niciodată pentru dezvoltarea detectorului. Documentele sunt atribuite pe grupuri de sursă, astfel încât niciun text sursă din datele noastre de dezvoltare și niciuna dintre rescrierile sale AI nu apare aici. Textele umane provin din surse publicate, majoritatea scrise înainte ca instrumentele de scriere AI să fie răspândite (știri, articole de enciclopedie și de web, răspunsuri umane la întrebări); textele AI includ rezultate de model needitate, text parafrazat de un al doilea model, schițe umanizate și documente mixte, în 10 limbi. Majoritatea documentelor AI din acest set au fost scrise de modele Gemini și GPT.

Eseuri ale studenților (555 documente): eseuri ale unor studenți vorbitori nativi de altă limbă decât engleza, din corpusul ELLIPSE, împreunate cu eseuri AI scrise pe aceleași subiecte și cu eseuri AI care au fost apoi parafrazate sau umanizate. Acest set este folosit doar pentru evaluare, niciodată pentru dezvoltarea detectorului.

Benchmark-ul MAGE (1.600 documente): un benchmark public de cercetare pentru text generat de mașină, pe care nu l-am folosit pentru dezvoltarea detectorului. Include text AI din familii de modele care nu se află în datele noastre și o proporție mare de text AI parafrazat. Deoarece benchmark-ul este public, modelul Gemini subiacent poate să fi văzut părți din el în timpul antrenării sale, așa că citiți rezultatele ca pe un caz optimist.

Limite pe care ar trebui să le cunoașteți

Acestea sunt rezultate pe seturile noastre de testare, nu o garanție pentru un anumit text. Textele scurte, schițele editate intens, textul AI parafrazat și scrierile din modele pe care nu le-am testat pot obține scoruri diferite.

O rată scăzută de fals pozitive nu este zero. Dacă sunteți semnalat, tratați scorul ca pe un motiv de a privi mai atent, nu ca pe o dovadă — consultați pagina noastră Integritate academică pentru ce să faceți.

Numerele sunt legate de un singur model și de o singură versiune a modului în care textul îi este trimis. Când schimbăm oricare dintre ele, rulăm din nou evaluarea și înlocuim acest raport.

Cum am măsurat

Un script de evaluare trimite fiecare document de test prin același detector pe care îl folosește site-ul, apoi compară scorul fiecărui document și al fiecărei propoziții cu eticheta cunoscută. Raportează rezultate la două praguri (50%, cel folosit de site, și 70% pentru comparație), pe limbă, gen și sursă, și marchează orice grup cu mai puțin de 200 de elemente ca fiind prea mic pentru a fi citat. Această pagină arată doar grupurile mai mari. Documentele pe care filtrul de conținut al Google a refuzat să le proceseze nu au scor și sunt excluse din numere: 1 în setul held-out, 0 printre eseurile studenților și 1 în MAGE. Toate celelalte documente au fost punctate.

Întrebări frecvente despre acuratețea detectorului

Pe setul nostru de testare held-out de 1.826 documente, a semnalat 0,6 % dintre documentele umane ca fiind AI și a detectat 90,6 % dintre documentele AI (AUROC 0,954). Rezultatele variază în funcție de setul de testare, iar textul AI parafrazat este prins mult mai rar.

Rar pe seturile noastre de testare: 0,6 % dintre documentele umane din setul held-out și 0,9 % dintre eseurile studenților vorbitori nativi de altă limbă decât engleza. Asta nu înseamnă zero, așa că un scor nu este niciodată o dovadă în sine.

Mai puțin fiabil. În setul nostru held-out, textul AI parafrazat de un alt model a fost detectat în 71,1 % din cazuri, față de 97,3 % pentru textul AI needitat. Pe benchmark-ul public MAGE, rata pentru textul parafrazat a fost 96,9 %, deci variază mult în funcție de text.

Nu. L-am rulat noi înșine pe seturile noastre de testare și pe un benchmark public. Publicăm metoda, seturile și limitele, astfel încât să puteți judeca numerele, și îl rulăm din nou ori de câte ori modelul se schimbă.

Nu. Detectarea este probabilistică. Folosiți scorul ca pe un semnal, alături de schițe, istoricul versiunilor și o conversație cu autorul, așa cum explică pagina noastră Integritate academică.

Verificați un text cu Detector AI de la ZeroTell

Vedeți care propoziții par scrise de AI și de ce — apoi judecați singuri.

Deschide Detectorul AI