Detectează Turnitin ChatGPT? Răspunsul onest

Răspunsul direct: da, cu avertismente importante

Turnitin include un indicator de scriere AI în rapoartele sale de similitudine din aprilie 2023, construit special pentru a repera textul provenit din modele lingvistice mari precum ChatGPT. Dacă lipești un răspuns ChatGPT direct într-un eseu și îl predai, există o șansă foarte mare ca Turnitin să semnaleze cea mai mare parte din el. Partea aceasta este tranșată.

Avertismentele contează la fel de mult. Indicatorul este o estimare statistică, nu o dovadă. Rulează doar pe lucrările care îndeplinesc cerințele minime, în prezent cel puțin 300 de cuvinte de proză. Este mai puțin fiabil pe documentele mixte, om plus AI, are o problemă documentată de fals pozitive la nivel de propoziție, iar Turnitin însuși le spune profesorilor că scorul nu ar trebui să fie niciodată singura bază a unei decizii de abatere academică. Deci poate Turnitin să detecteze AI? Da. Poate dovedi că l-ai folosit? Nu, iar în acel gol se decide fiecare caz real.

Cum funcționează indicatorul de scriere AI al Turnitin

Turnitin nu îți compară eseul cu o bază de date de răspunsuri ChatGPT. În schimb, îți împarte documentul în segmente suprapuse de câteva sute de cuvinte, apoi evaluează fiecare propoziție după cât de previzibilă este statistic. Modelele lingvistice scriu alegând în mod repetat cuvântul următor cel mai probabil, ceea ce produce un text neobișnuit de neted, uniform, cu puține surprize. Scrisul uman este mai dezordonat: lungimile propozițiilor variază, alegerile de cuvinte sunt uneori ciudate, iar ritmul urcă și coboară.

Cele două semnale care conduc cea mai mare parte din asta sunt perplexitatea, adică cât de previzibile sunt alegerile tale de cuvinte, și burstiness-ul, adică cât de mult variază structura propozițiilor tale. Dacă un pasaj este constant neted și constant uniform, modelul îi marchează propozițiile drept probabil AI. Acoperim mecanica mai în profunzime în ghidul nostru despre cum funcționează detectoarele AI, dar ideea-cheie este simplă: Turnitin detectează amprenta statistică a scrisului de mașină, nu conținutul vreunui chatbot anume.

Ce înseamnă de fapt scorul procentual

Numărul pe care îl văd profesorii este procentul de propoziții eligibile din documentul tău despre care modelul crede că au fost generate de AI. Un scor de 40% nu înseamnă că Turnitin este 40% sigur că ai trișat. Înseamnă că aproximativ 40% din propozițiile tale de proză i-au părut modelului scrise de mașină. Sunt afirmații foarte diferite, iar confundarea lor este cea mai frecventă greșeală din ședințele privind abaterile.

Două detalii merită știute. În primul rând, Turnitin afișează scorurile între 1% și 19% cu un asterisc, pentru că propria sa cercetare a constatat că scorurile mici au o probabilitate mai mare de fals pozitive, iar unele instituții își configurează rapoartele astfel încât acea bandă să fie complet suprimată. În al doilea rând, indicatorul ignoră textul care nu se califică, precum listele cu marcatori, codul, tabelele și propozițiile foarte scurte, așa că procentul descrie doar o parte din documentul tău.

Cât de precisă este detectarea AI a Turnitin?

Afirmația publicată de Turnitin este că indicatorul identifică scrierea AI cu o acuratețe de aproximativ 98%, menținând în același timp rata de fals pozitive la nivel de document sub 1% pentru lucrările în care mai mult de 20% din text este generat de AI. Aceste cifre provin din testele de laborator ale Turnitin și descriu un scenariu specific: text AI în mare parte needitat, în proză engleză.

Examinarea independentă a fost mai puțin măgulitoare. La scurt timp după lansare, Turnitin a recunoscut că fals pozitivele la nivel de propoziție erau mai mari decât se aștepta, mai aproape de 4% în documentele cu un amestec de scris uman și AI. Jurnaliștii care au testat instrumentul în 2023 au constatat că se împiedică pe eseurile hibride, ratând pasaje AI și semnalând unele umane. Iar în august 2023, Universitatea Vanderbilt a dezactivat public funcția, argumentând că riscul de fals pozitive era prea mare pentru a acționa pe baza lui. Rezumatul corect al acurateței detectării AI Turnitin: puternică pe output ChatGPT pur, needitat, semnificativ mai slabă pe tot ce se află între.

Ce vede de fapt profesorul tău

Studenții de obicei nu pot vedea deloc scorul AI. Indicatorul apare în vizualizarea de profesor a raportului de similitudine ca o mică insignă procentuală, separată de scorul de plagiat. Un clic pe ea deschide un raport în care propozițiile semnalate sunt evidențiate, cu o culoare pentru textul judecat ca generat de AI și alta pentru textul judecat ca generat de AI și apoi parafrazat cu un instrument.

Ce fac profesorii cu acel ecran variază enorm. Îndrumările Turnitin le spun să trateze scorul ca pe un semnal pentru a începe o conversație, nu ca pe un verdict, iar multe universități au transpus acea precauție în politică. În practică, un scor de 15% pe o lucrare altfel solidă este adesea ignorat, în timp ce un scor de 80% declanșează o privire mai atentă asupra istoricului tău de ciorne, asupra citărilor tale și asupra felului în care eseul se compară cu scrisul tău anterior. Numărul deschide dosarul; un om îl închide.

Detectează Turnitin textul parafrazat sau umanizat?

Uneori, și aici trăiește cursa înarmării. În 2024, Turnitin a adăugat detectarea parafrazării AI, un strat antrenat să repereze textul generat de un LLM și apoi trecut printr-un instrument de parafrazare. Parafrazarea ieftină, adică înlocuiri de sinonime care păstrează intactă structura originală a propozițiilor, este exact ce prinde acest strat, pentru că scheletul statistic al textului de mașină supraviețuiește schimbărilor de cuvinte.

Rescrierea mai profundă este o altă poveste. Când structura propozițiilor, ritmul și formulările sunt cu adevărat reconstruite, amprenta pe care se bazează detectorul se estompează. Aceasta este diferența dintre o trecere prin dicționarul de sinonime și umanizarea reală, și de aceea un umanizator AI gratuit serios îți arată scorurile de detectare înainte și după, în loc să îți ceară să iei rezultatele pe încredere. Testarea textului rescris pe detectoare reale este singurul mod onest de a ști dacă transformarea a funcționat.

Prinde textul AI pe care l-ai editat singur?

Textul AI editat superficial de obicei tot este semnalat. Schimbarea câtorva cuvinte, ștergerea unei introduceri sau reordonarea a două paragrafe nu schimbă statisticile la nivel de propoziție pe care le măsoară detectorul, așa că cea mai mare parte a documentului tot se citește ca scris de mașină. Studenții sunt surprinși în mod curent de asta: cincisprezece minute de șlefuire par muncă adevărată, dar abia mișcă scorul.

Textul rescris masiv este mult mai greu de prins, iar Turnitin o spune. Documentația sa notează că fiabilitatea scade pe documentele cu autorat mixt, exact motivul pentru care există asteriscul scorurilor mici. Dacă ai folosit ChatGPT pentru o schiță sau o ciornă brută și apoi ai rescris fiecare propoziție cu vocea ta, cu exemplele tale și cu tranzițiile tale, textul final este în mare parte al tău după orice măsură statistică. Detectorul este bun la a găsi proza de mașină. Nu are cum să vadă ideile de dedesubt.

GPT-4, Claude, Gemini: contează modelul?

Mai puțin decât ai spera. Turnitin și-a antrenat detectorul pe outputul modelelor lingvistice mari ca o categorie, nu pe un singur produs, iar fiecare model de chat important împărtășește același obicei de bază: prezicerea cuvântului următor cel mai probabil. Outputul implicit de la GPT-4o, Claude și Gemini poartă aceeași amprentă netedă, uniformă, iar testele arată constant că Turnitin le semnalează pe toate trei în proporții mari când textul este needitat.

Două nuanțe sunt reale. Modelele mai noi sunt marginal mai puțin previzibile decât textul GPT-3.5 pe care detectorul a fost inițial calibrat, așa că ratele de detectare pe modelele de frontieră pot scădea ușor până când Turnitin reantrenează, ceea ce face regulat. Iar trucurile de prompt precum "scrie ca un om" sau "adaugă burstiness" schimbă stilul de suprafață mult mai puțin decât cred oamenii, pentru că modelul tot alege cuvinte cu probabilitate mare sub costum. Schimbarea chatbotului nu este o strategie împotriva detectării.

Cum sunt de fapt prinși studenții

Un scor AI mare, singur, rareori scufundă pe cineva. Cazurile reale sunt construite dintr-un lanț de dovezi, iar indicatorul este doar prima verigă. Tiparul descris de profesori este consecvent: un procent mare, plus un document fără istoric de versiuni, plus un scris vizibil mai șlefuit sau mai generic decât lucrările anterioare ale studentului, plus probleme de conținut precum argumente vagi sau citări care nu există.

Ultimul punct merită subliniat. Referințele fabricate sunt artefactul cel mai incriminant în cazurile de abatere cu AI, pentru că nu pot fi explicate prin stilul de scriere. Un scor de detector poate fi contestat; o lucrare citată care nu a fost niciodată publicată nu poate. Dacă folosești deloc instrumente AI, în orice calitate permisă, verifică manual fiecare sursă, păstrează-ți ciornele și scrie cu o voce consecventă cu restul muncii tale. Studenții care sunt prinși aproape niciodată nu sunt prinși doar din cauza procentului.

Ce să faci dacă ești acuzat pe nedrept

Fals pozitivele se întâmplă, iar Turnitin o recunoaște. Cercetările au arătat de asemenea că detectoarele AI, ca o categorie, îi semnalează pe cei care scriu în engleză ca limbă străină în proporții ridicate, probabil pentru că engleza atentă, învățată, tinde să fie mai uniformă și mai previzibilă, exact calitățile pe care detectoarele le citesc drept mecanice. Dacă ți-ai scris lucrarea onest și ai fost semnalat, ai o poziție apărabilă, așa că nu intra în panică și nu mărturisi ceva ce nu ai făcut.

Construiește-ți dosarul de dovezi înainte de întâlnire. Istoricul versiunilor din Google Docs sau Word este cel mai puternic artefact pe care îl ai, pentru că arată eseul crescând propoziție cu propoziție de-a lungul orelor. Adaugă notițele, schițele, istoricul cercetării din browser și lucrări notate anterior care îți arată stilul. Cere să vezi raportul propriu-zis și indică avertismentele publicate chiar de Turnitin: asteriscul pe scorurile mici, rata de fals pozitive la nivel de propoziție și declarația explicită a companiei că indicatorul nu ar trebui folosit ca dovadă unică. Majoritatea instituțiilor au un proces de contestare. Folosește-l calm și în scris.

Verifică-ți lucrarea înainte să o predai

Iată frustrarea practică: studenții nu pot vedea scorul AI al Turnitin înainte de predare, așa că momentul în care afli că există o problemă este adesea cel mai prost moment posibil. Soluția este să îți testezi ciorna mai întâi pe detectoare independente. Nu sunt identice cu Turnitin, dar măsoară aceleași semnale statistice, iar o ciornă care iese curată pe mai multe detectoare are șanse foarte mici să aprindă indicatorul.

Exact pentru asta este construit Humanize AI. Lipește-ți textul sau încarcă un fișier PDF sau DOCX și primești un scor live de probabilitate AI de la două detectoare independente înainte să schimbi ceva, apoi un scor proaspăt după umanizare, în oricare dintre cele 40 de limbi, fără înregistrare și fără limite de cuvinte. Dacă scorul tău este mai mare decât te așteptai, ghidul nostru despre cum să ocolești detectarea AI Turnitin te ghidează prin scăderea lui în mod onest, cu propria ta voce făcând cea mai mare parte din muncă.

Întrebări frecvente