Spoor Turnitin ChatGPT op? Die Eerlike Antwoord

Die direkte antwoord: ja, met belangrike voorbehoude

Turnitin sluit sedert April 2023 'n KI-skryfaanwyser in sy ooreenkomsverslae in, en dit is spesifiek gebou om teks van groot taalmodelle soos ChatGPT te bespeur. As jy 'n ChatGPT-antwoord reguit in 'n opstel plak en dit indien, is daar 'n baie hoe kans dat Turnitin die meeste daarvan sal merk. Daardie deel is uitgemaak.

Die voorbehoude maak net soveel saak. Die aanwyser is 'n statistiese skatting, nie bewys nie. Dit loop slegs op inskrywings wat aan minimum vereistes voldoen, tans ten minste 300 woorde prosa. Dit is minder betroubaar op gemengde mens-en-KI-dokumente, dit het 'n gedokumenteerde vals-positief-probleem op sinsvlak, en Turnitin self se vir dosente die telling behoort nooit die enigste grondslag vir 'n akademiese wangedragbesluit te wees nie. So kan Turnitin KI opspoor? Ja. Kan dit bewys dat jy dit gebruik het? Nee, en daardie gaping is waar elke werklike saak besleg word.

Hoe Turnitin se KI-skryfaanwyser werk

Turnitin vergelyk nie jou opstel teen 'n databasis van ChatGPT-uitsette nie. In plaas daarvan breek dit jou dokument op in oorvleuelende segmente van 'n paar honderd woorde, en beoordeel dan elke sin op hoe statisties voorspelbaar dit is. Taalmodelle skryf deur herhaaldelik die mees waarskynlike volgende woord te kies, wat ongewoon gladde, egalige, lae-verrassing-teks produseer. Menslike skryfwerk is deurmekaarder: sinslengtes wissel, woordkeuses is af en toe vreemd, en die ritme styg en daal.

Die twee seine wat die meeste hiervan dryf, is perpleksiteit, wat beteken hoe voorspelbaar jou woordkeuses is, en bursterigheid, wat beteken hoeveel jou sinstruktuur wissel. As 'n gedeelte konsekwent glad en konsekwent egalig is, merk die model sy sinne as waarskynlik KI. Ons dek die meganika in meer diepte in ons gids oor hoe KI-opspoorders werk, maar die kernpunt is eenvoudig: Turnitin spoor die statistiese vingerafdruk van masjienskryfwerk op, nie die inhoud van enige spesifieke geselsbot nie.

Wat die persentasietelling werklik beteken

Die getal wat dosente sien, is die persentasie kwalifiserende sinne in jou dokument wat die model glo KI-gegenereer was. 'n 40%-telling beteken nie Turnitin is 40% seker jy het bedrieg nie. Dit beteken ongeveer 40% van jou prosasinne het vir die model masjiengeskryf gelyk. Dit is baie verskillende bewerings, en om hulle te verwar, is die algemeenste fout in wangedragvergaderings.

Twee besonderhede is die moeite werd om te weet. Eerstens, Turnitin vertoon tellings tussen 1% en 19% met 'n sterretjie omdat sy eie navorsing bevind het dat lae tellings meer geneig is om vals positiewe te bevat, en sommige instellings stel verslae in om daardie reeks heeltemal te onderdruk. Tweedens, die aanwyser ignoreer teks wat nie kwalifiseer nie, soos kolpuntlyste, kode, tabelle, en baie kort sinne, so die persentasie beskryf slegs 'n deel van jou dokument.

Hoe akkuraat is Turnitin se KI-opsporing?

Turnitin se gepubliseerde bewering is dat die aanwyser KI-skryfwerk met ongeveer 98% akkuraatheid identifiseer terwyl dit die vals-positief-koers op dokumentvlak onder 1% hou vir referate waar meer as 20% van die teks KI-gegenereer is. Daardie getalle kom uit Turnitin se eie laboratoriumtoetsing, en hulle beskryf 'n spesifieke scenario: grootliks ongeredigeerde KI-teks in Engelse prosa.

Onafhanklike ondersoek was minder vleiend. Kort na bekendstelling het Turnitin erken dat vals positiewe op sinsvlak hoer as verwag was, nader aan 4% in dokumente met 'n mengsel van menslike en KI-skryfwerk. Joernaliste wat die hulpmiddel in 2023 getoets het, het bevind dit struikel op hibriede opstelle, mis KI-gedeeltes en merk menslike gedeeltes. En in Augustus 2023 het Vanderbilt Universiteit die kenmerk in die openbaar gedeaktiveer, met die argument dat die vals-positief-risiko te hoog was om op te reageer. Die billike opsomming van Turnitin se KI-opsporingsakkuraatheid: sterk op suiwer, ongeredigeerde ChatGPT-uitset, betekenisvol swakker op alles tussenin.

Wat jou onderwyser werklik sien

Studente kan gewoonlik glad nie die KI-telling sien nie. Die aanwyser verskyn in die dosent se aansig van die ooreenkomsverslag as 'n klein persentasiekenteken, apart van die plagiaattelling. Om daarop te klik, open 'n verslag waar gemerkte sinne uitgelig word, met een kleur vir teks wat as KI-gegenereer beoordeel is en 'n ander vir teks wat as KI-gegenereer en toe deur 'n hulpmiddel geparafraseer beoordeel is.

Wat dosente met daardie skerm doen, wissel geweldig. Turnitin se eie riglyne se vir hulle om die telling as 'n sein te behandel om 'n gesprek te begin, nie 'n uitspraak nie, en baie universiteite het daardie versigtigheid in beleid geskryf. In die praktyk word 'n 15%-telling op 'n andersins sterk referaat dikwels geignoreer, terwyl 'n 80%-telling 'n nader kyk na jou konsepgeskiedenis, jou bronverwysings, en hoe die opstel met jou vorige skryfwerk vergelyk, sneller. Die getal open die leer; 'n mens sluit dit.

Spoor Turnitin geparafraseerde of vermenslikte teks op?

Soms, en dit is waar die wapenwedloop woon. In 2024 het Turnitin KI-parafrase-opsporing bygevoeg, 'n laag wat geleer is om teks te bespeur wat deur 'n LLM gegenereer is en toe deur 'n parafraseerhulpmiddel geloop is. Goedkoop parafrasering, wat sinoniemuitruilings beteken wat die oorspronklike sinstruktuur onaangeraak hou, is presies wat hierdie laag vang, want die statistiese geraamte van die masjienteks oorleef die woordveranderinge.

Dieper herskrywing is 'n ander storie. Wanneer sinstruktuur, ritme, en frasering werklik herbou word, verdwyn die vingerafdruk waarop die opspoorder staatmaak. Dit is die verskil tussen 'n tesourus-beurt en werklike vermensliking, en dit is waarom 'n ernstige gratis KI-vermensliker vir jou voor- en na-opsporingstellings wys in plaas daarvan om jou te vra om resultate op geloof te neem. Om jou herskryfde teks teen werklike opspoorders te toets, is die enigste eerlike manier om te weet of die transformasie gewerk het.

Vang dit KI-teks wat jy self geredigeer het?

Lig geredigeerde KI-teks word gewoonlik steeds gemerk. Om 'n handvol woorde te verander, 'n inleiding te skrap, of twee paragrawe te herrangskik, verander nie die statistiek op sinsvlak wat die opspoorder meet nie, so die meeste van die dokument lees steeds as masjienskryfwerk. Studente is gereeld hieroor verbaas: vyftien minute se opknapping voel soos werklike werk, maar dit skuif die telling skaars.

Swaar herskryfde teks is baie moeiliker om te vang, en Turnitin se so. Sy dokumentasie merk op dat betroubaarheid daal op dokumente met gemengde outeurskap, wat presies is waarom die lae-telling-sterretjie bestaan. As jy ChatGPT vir 'n raamwerk of 'n ruwe konsep gebruik het en toe elke sin in jou eie stem herskryf het, met jou eie voorbeelde en jou eie oorgange, is die finale teks grootliks joune volgens enige statistiese maatstaf. Die opspoorder is goed daarmee om masjienprosa te vind. Dit het geen manier om die idees daaronder te sien nie.

GPT-4, Claude, Gemini: maak die model saak?

Minder as wat jy sou hoop. Turnitin het sy opspoorder op uitset van groot taalmodelle as 'n kategorie geleer, nie op een produk nie, en elke groot geselsmodel deel dieselfde onderliggende gewoonte: om die mees waarskynlike volgende woord te voorspel. Verstek-uitset van GPT-4o, Claude, en Gemini dra almal dieselfde gladde, egalige vingerafdruk, en toetsing wys konsekwent dat Turnitin al drie teen hoe koerse merk wanneer die teks ongeredigeer is.

Twee nuanses is werklik. Nuwer modelle is marginaal minder voorspelbaar as die GPT-3.5-teks waarop die opspoorder oorspronklik afgestem was, so opsporingskoerse op voorpuntmodelle kan effens daal totdat Turnitin heroplei, wat dit gereeld doen. En aansporingstruuks soos "skryf soos 'n mens" of "voeg bursterigheid by" verander die oppervlakstyl veel minder as wat mense dink, want die model kies steeds hoe-waarskynlikheid-woorde onder die kostuum. Om geselsbotte te verwissel, is nie 'n opsporingstrategie nie.

Hoe studente werklik gemerk word

'n Hoe KI-telling alleen sink selde iemand. Werklike sake word uit 'n ketting van bewyse gebou, en die aanwyser is net die eerste skakel. Die patroon wat dosente beskryf, is konsekwent: 'n hoe persentasie, plus 'n dokument sonder weergawegeskiedenis, plus skryfwerk wat merkbaar meer gepoleer of meer generies is as die student se vroeere werk, plus inhoudsprobleme soos vae argumente of bronverwysings wat nie bestaan nie.

Daardie laaste een verdien klem. Versonne verwysings is die enkele mees verdoemende artefak in KI-wangedragsake, want hulle kan nie deur skryfstyl verklaar word nie. Oor 'n opspoordertelling kan geredeneer word; oor 'n aangehaalde referaat wat nooit gepubliseer is nie, nie. As jy hoegenaamd KI-hulpmiddels gebruik, in enige toegelate hoedanigheid, verifieer elke bron met die hand, hou jou konsepte, en skryf in 'n stem konsekwent met die res van jou werk. Die studente wat gevang word, word amper nooit deur die persentasie alleen gevang nie.

Wat om te doen as jy valslik beskuldig word

Vals positiewe gebeur, en Turnitin erken dit. Navorsing het ook getoon dat KI-opspoorders as 'n klas nie-moedertaal-Engelse skrywers teen verhoogde koerse merk, waarskynlik omdat versigtige, aangeleerde Engels geneig is om meer eenvormig en voorspelbaar te wees, presies die eienskappe wat opspoorders as masjienagtig lees. As jy jou referaat eerlik geskryf het en gemerk is, het jy 'n verdedigbare posisie, so moenie paniekerig raak nie en moenie iets bely wat jy nie gedoen het nie.

Bou jou bewysleer voor die vergadering. Weergawegeskiedenis van Google Docs of Word is die sterkste artefak wat jy het, want dit wys die opstel wat sin vir sin oor ure groei. Voeg jou notas, raamwerke, blaaier-navorsingsgeskiedenis, en vroeere gegradeerde skryfwerk by wat jou styl wys. Vra om die werklike verslag te sien, en verwys na Turnitin se eie gepubliseerde voorbehoude: die sterretjie op lae tellings, die vals-positief-koers op sinsvlak, en die maatskappy se uitdruklike verklaring dat die aanwyser nie as enigste bewys gebruik behoort te word nie. Die meeste instellings het 'n appelproses. Gebruik dit kalm en skriftelik.

Kontroleer jou werk voordat jy indien

Hier is die praktiese frustrasie: studente kan nie Turnitin se KI-telling voor indiening sien nie, so die eerste keer wat jy leer daar is 'n probleem is dikwels die slegste moontlike oomblik. Die omweg is om jou konsep eers teen onafhanklike opspoorders te toets. Hulle is nie identies aan Turnitin nie, maar hulle meet dieselfde statistiese seine, en 'n konsep wat oor verskeie opspoorders skoon tel, is baie onwaarskynlik om die aanwyser te laat oplig.

Dit is presies waarvoor Humanize AI gebou is. Plak jou teks, of laai 'n PDF- of DOCX-leer op, en jy kry 'n lewendige KI-waarskynlikheidstelling van twee onafhanklike opspoorders voordat jy enigiets verander, dan 'n vars telling na vermensliking, in enige van 40 tale, sonder aanmelding en sonder woordlimiete. As jou telling hoer is as verwag, loop ons gids oor hoe om Turnitin se KI-opsporing te omseil deur hoe om dit eerlik te verlaag, met jou eie stem wat die meeste van die werk doen.

Gereelde vrae