Turnitinek ChatGPT detektatzen du? Erantzun zintzoa

Erantzun zuzena: bai, ohar garrantzitsuekin

Turnitinek AI idazketa-adierazle bat sartu du bere antzekotasun-txostenetan 2023ko apiriletik, eta zehazki ChatGPT bezalako hizkuntza-eredu handietako testua atzemateko eraiki zen. ChatGPTren erantzun bat saiakera batean zuzenean itsatsi eta bidaltzen baduzu, aukera oso handia dago Turnitinek gehiena markatzeko. Zati hori argi dago.

Oharrek beste hainbeste axola dute. Adierazlea zenbatespen estatistiko bat da, ez froga bat. Gutxieneko baldintzak betetzen dituzten bidalketetan soilik exekutatzen da, gaur egun gutxienez 300 prosa-hitz. Ez da hain fidagarria gizakiaren eta AIren dokumentu nahasietan, esaldi-mailan positibo faltsuen arazo dokumentatu bat du, eta Turnitinek berak irakasleei esaten die puntuazioa ez litzatekeela inoiz izan behar jokabide akademiko okerraren erabakiaren oinarri bakarra. Beraz, Turnitinek AI detekta dezake? Bai. Erabili duzula froga dezake? Ez, eta hutsune hori da kasu erreal bakoitza erabakitzen den lekua.

Nola funtzionatzen duen Turnitinen AI idazketa-adierazleak

Turnitinek ez du zure saiakera ChatGPT irteeren datu-base baten aurka alderatzen. Horren ordez, zure dokumentua ehunka hitzeko segmentu gainjarritan zatitzen du, eta gero esaldi bakoitza zenbateraino den aurreikusgarria estatistikoki puntuatzen du. Hizkuntza-ereduek behin eta berriz hurrengo hitzik probableena aukeratuz idazten dute, eta horrek ohiz kanpo leuna, uniformea eta ustekabe gutxiko testua ekoizten du. Gizakiaren idazketa nahasiagoa da: esaldien luzerak aldatzen dira, hitz-aukerak noizean behin bitxiak dira, eta erritmoa igo eta jaisten da.

Horren gehiena bultzatzen duten bi seinaleak perplexitatea dira, hau da, zure hitz-aukerak zenbateraino diren aurreikusgarriak, eta burstiness delakoa, hau da, zure esaldien egitura zenbat aldatzen den. Pasarte bat modu jarraituan leuna eta jarraituan uniformea bada, ereduak bere esaldiak AI izateko probableak markatzen ditu. Mekanika sakonago jorratzen dugu gure AI detektagailuek nola funtzionatzen duten gidan, baina funtsezko puntua sinplea da: Turnitinek makina-idazketaren hatz-marka estatistikoa detektatzen du, ez txatbot zehatz baten edukia.

Zer esan nahi duen benetan ehuneko puntuazioak

Irakasleek ikusten duten zenbakia ereduak AIk sortutakotzat jotzen dituen zure dokumentuko esaldi kualifikatuen ehunekoa da. % 40ko puntuazio batek ez du esan nahi Turnitin % 40ean ziur dagoenik iruzur egin duzula. Esan nahi du zure prosa-esaldien % 40 inguru makinak idatzitakoa zirudiela ereduaren arabera. Horiek oso aldarrikapen desberdinak dira, eta biak nahastea da jokabide okerraren bileretan egiten den akatsik ohikoena.

Bi xehetasun jakitea merezi du. Lehenik, Turnitinek % 1 eta % 19 arteko puntuazioak izartxo batekin erakusten ditu, bere ikerketak aurkitu baitzuen puntuazio baxuek positibo faltsuak izateko aukera gehiago dutela, eta erakunde batzuek txostenak konfiguratzen dituzte tarte hori guztiz kentzeko. Bigarrenik, adierazleak kualifikatzen ez den testua ez du kontuan hartzen, hala nola buleta-zerrendak, kodea, taulak eta esaldi oso laburrak, beraz ehunekoak zure dokumentuaren zati bat baino ez du deskribatzen.

Zein zehatza da Turnitinen AI detekzioa?

Turnitinen aldarrikapen argitaratua da adierazleak AI idazketa % 98 inguruko zehaztasunez identifikatzen duela, eta aldi berean dokumentu-mailako positibo faltsuen tasa % 1etik behera mantentzen duela testuaren % 20 baino gehiago AIk sortutakoa den paperetarako. Zenbaki horiek Turnitinen laborategiko proba propioetatik datoz, eta egoera zehatz bat deskribatzen dute: gehienbat editatu gabeko AI testua ingelesezko prosan.

Kanpoko azterketa ez da hain onbera izan. Abiaraztetik gutxira, Turnitinek onartu zuen esaldi-mailako positibo faltsuak espero baino altuagoak zirela, % 4tik gertuago gizakiaren eta AIren idazketa nahastuta duten dokumentuetan. 2023an tresna probatu zuten kazetariek aurkitu zuten saiakera hibridoetan estropezu egiten zuela, AI pasarteak galduz eta gizakienak markatuz. Eta 2023ko abuztuan, Vanderbilt Unibertsitateak publikoki desgaitu zuen ezaugarria, positibo faltsuen arriskua handiegia zela argudiatuz jarduteko. Turnitinen AI detekzioaren zehaztasunaren laburpen bidezkoa: sendoa ChatGPTren irteera puru eta editatu gabean, nabarmen ahulagoa tartean dagoen guztian.

Zer ikusten duen benetan zure irakasleak

Ikasleek normalean ezin dute AI puntuazioa batere ikusi. Adierazlea irakaslearen antzekotasun-txostenaren ikuspegian agertzen da ehuneko-domina txiki gisa, plagio-puntuaziotik bereizita. Bertan klik eginez txosten bat irekitzen da, non markatutako esaldiak nabarmenduta dauden, kolore batekin AIk sortutakotzat jotzen den testurako eta beste batekin AIk sortu eta gero tresna batez parafraseatutakotzat jotzen den testurako.

Irakasleek pantaila horrekin egiten dutena izugarri aldatzen da. Turnitinen gidaliburuak esaten die puntuazioa elkarrizketa bat hasteko seinale gisa hartzeko, ez epai gisa, eta unibertsitate askok ohar hori politikan idatzi dute. Praktikan, bestela sendoa den paper batean % 15eko puntuazioa askotan alde batera uzten da, eta % 80ko puntuazioak zure zirriborro-historiaren, zure aipamenen eta saiakerak zure aurreko idazketarekin nola alderatzen den begirada estuago bat pizten du. Zenbakiak fitxategia irekitzen du; gizaki batek ixten du.

Turnitinek parafraseatutako edo humanizatutako testua detektatzen du?

Batzuetan bai, eta hemen bizi da arma-lasterketa. 2024an Turnitinek AI parafraseo-detekzioa gehitu zuen, LLM batek sortu eta gero parafraseatzeko tresna batez pasatako testua atzemateko entrenatutako geruza bat. Parafraseo merkea, hau da, jatorrizko esaldiaren egitura ukitu gabe uzten duten sinonimo-trukeak, da hain zuzen geruza honek harrapatzen duena, makina-testuaren eskeleto estatistikoak hitz-aldaketak gainditzen baititu.

Berridazketa sakonagoa beste kontu bat da. Esaldien egitura, erritmoa eta esaldi-moldeak benetan berreraikitzen direnean, detektagailuak oinarritzen duen hatz-marka ahultzen da. Hori da hiztegi-pasalditik benetako humanizaziorako aldea, eta horregatik AI humanizatzaile doako serio batek aurreko eta ondorengo detekzio-puntuazioak erakusten dizkizu, emaitzak fedez hartzeko eskatu beharrean. Zure berridatzitako testua benetako detektagailuen aurka probatzea da eraldaketak funtzionatu duen jakiteko modu zintzo bakarra.

Zuk zeuk editatutako AI testua harrapatzen du?

Arinki editatutako AI testua normalean oraindik markatzen da. Hitz gutxi batzuk aldatzeak, sarrera bat ezabatzeak edo bi paragrafo berrantolatzeak ez du aldatzen detektagailuak neurtzen dituen esaldi-mailako estatistika, beraz dokumentuaren gehiena oraindik makina-idazketa gisa irakurtzen da. Ikasleak sarritan harritzen dira honekin: hamabost minutuko leuntzeak benetako lana dirudi, baina ozta-ozta mugitzen du puntuazioa.

Asko berridatzitako testua askoz zailagoa da harrapatzeko, eta Turnitinek hala dio. Bere dokumentazioak dio fidagarritasuna jaisten dela egiletza nahastua duten dokumentuetan, eta hori da hain zuzen puntuazio baxuaren izartxoa existitzeko arrazoia. ChatGPT eskema baterako edo zirriborro gordin baterako erabili baduzu eta gero esaldi bakoitza zure ahotsean berridatzi baduzu, zure adibideekin eta zure trantsizioekin, azken testua hein handi batean zurea da edozein neurri estatistikoren arabera. Detektagailua ona da makina-prosa aurkitzen. Ez du modurik azpian dauden ideiak ikusteko.

GPT-4, Claude, Gemini: ereduak axola du?

Espero baino gutxiago. Turnitinek bere detektagailua hizkuntza-eredu handien irteeran entrenatu zuen kategoria gisa, ez produktu bakar batean, eta txat-eredu handi bakoitzak ohitura beraren azpian partekatzen du: hurrengo hitzik probableena aurreikustea. GPT-4o, Claude eta Geminiren irteera lehenetsiak hatz-marka leun eta uniforme bera daramate, eta probek etengabe erakusten dute Turnitinek hirurak tasa altuetan markatzen dituela testua editatu gabe dagoenean.

Bi ñabardura errealak dira. Eredu berriagoak detektagailua hasieran doitu zeneko GPT-3.5 testua baino apur bat aurreikusezinagoak dira, beraz muturreko ereduetan detekzio-tasak apur bat jaits daitezke Turnitinek berrentrenatu arte, eta erregularki egiten du. Eta "gizaki bat bezala idatzi" edo "gehitu burstiness" bezalako prompt-trukoek azaleko estiloa jendeak uste baino askoz gutxiago aldatzen dute, eredua oraindik probabilitate handiko hitzak aukeratzen ari baita mozorroaren azpian. Txatbotak aldatzea ez da detekzio-estrategia bat.

Nola markatzen dituzten benetan ikasleak

AI puntuazio altu batek berak nekez hondoratzen du inor. Kasu errealak froga-kate batetik eraikitzen dira, eta adierazlea lehen katebegia baino ez da. Irakasleek deskribatzen duten patroia koherentea da: ehuneko altu bat, gehi bertsio-historiarik gabeko dokumentu bat, gehi ikaslearen aurreko lana baino nabarmen leunagoa edo generikoagoa den idazketa, gehi eduki-arazoak, hala nola argudio lausoak edo existitzen ez diren aipamenak.

Azken horrek azpimarra merezi du. Asmatutako erreferentziak dira AI jokabide okerreko kasuetan artefaktu gaitzesgarriena, ezin baitira idazketa-estiloz azaldu. Detektagailu-puntuazio batekin eztabaida daiteke; inoiz argitaratu ez zen paper aipatu batekin ezin. AI tresnak batere erabiltzen badituzu, baimendutako edozein neurritan, egiaztatu iturri bakoitza eskuz, gorde zure zirriborroak, eta idatzi zure lanaren gainerakoarekin bat datorren ahots batean. Harrapatzen dituzten ikasleak ia inoiz ez dira ehunekoak bakarrik harrapatzen.

Zer egin gezurrez salatzen bazaituzte

Positibo faltsuak gertatzen dira, eta Turnitinek onartzen du. Ikerketek ere erakutsi dute AI detektagailuek, kategoria gisa, ingeles ez-natiboak diren idazleak tasa altuagoetan markatzen dituztela, ziurrenik ingeles arretatsu eta ikasia uniformeagoa eta aurreikusgarriagoa izan ohi delako, hain zuzen detektagailuek makina-antzekotzat irakurtzen dituzten ezaugarriak. Zure papera zintzoki idatzi baduzu eta markatu bazaituzte, defenda daitekeen jarrera bat duzu, beraz ez izutu eta ez aitortu egin ez duzun ezer.

Eraiki zure froga-fitxategia bilera aurretik. Google Docs edo Wordeko bertsio-historia da duzun artefakturik sendoena, saiakera esaldiz esaldi orduz ordu hazten dela erakusten baitu. Gehitu zure oharrak, eskemak, nabigatzaileko ikerketa-historia eta zure estiloa erakusten duten aurreko idazlan kalifikatuak. Eskatu benetako txostena ikustea, eta seinalatu Turnitinen ohar argitaratuak: puntuazio baxuen izartxoa, esaldi-mailako positibo faltsuen tasa, eta adierazlea froga bakar gisa erabili behar ez litzatekeenaren enpresaren adierazpen esplizitua. Erakunde gehienek errekurtso-prozesu bat dute. Erabili lasai eta idatziz.

Egiaztatu zure lana bidali aurretik

Hona hemen frustrazio praktikoa: ikasleek ezin dute Turnitinen AI puntuazioa bidali aurretik ikusi, beraz arazo bat dagoela ikasten duzun lehen aldia sarritan une posible txarrena da. Konponbidea zure zirriborroa detektagailu independenteen aurka lehenago probatzea da. Ez dira Turnitinen berdinak, baina seinale estatistiko berdinak neurtzen dituzte, eta detektagailu anitzetan garbi puntuatzen duen zirriborro batek nekez piztuko du adierazlea.

Hau da hain zuzen Humanize AI zertarako eraiki den. Itsatsi zure testua, edo igo PDF edo DOCX fitxategi bat, eta bi detektagailu independenteren zuzeneko AI probabilitate-puntuazio bat lortuko duzu ezer aldatu aurretik, eta gero puntuazio berri bat humanizatu ondoren, 40 hizkuntzatako edozeinetan, izena eman gabe eta hitz-mugarik gabe. Zure puntuazioa espero baino altuagoa bada, gure gidak Turnitin AI detekzioa nola saihestu gaiari buruz zintzoki jaisteko urratsak azaltzen ditu, zure ahotsak lanaren gehiena eginez.

Ohiko galderak