क्या Turnitin ChatGPT को पकड़ता है? ईमानदार जवाब

सीधा जवाब: हां, अहम चेतावनियों के साथ

Turnitin अप्रैल 2023 से अपनी सिमिलैरिटी रिपोर्ट में AI राइटिंग इंडिकेटर शामिल करता आया है, और वह खासतौर पर ChatGPT जैसे लार्ज लैंग्वेज मॉडलों के टेक्स्ट को पहचानने के लिए बनाया गया था। अगर आप ChatGPT का जवाब सीधे निबंध में चिपकाकर सबमिट कर देते हैं, तो बहुत ऊंची संभावना है कि Turnitin उसका ज़्यादातर हिस्सा फ़्लैग कर देगा। वह हिस्सा तय है।

चेतावनियां भी उतनी ही मायने रखती हैं। इंडिकेटर एक सांख्यिकीय अनुमान है, सबूत नहीं। वह सिर्फ़ न्यूनतम शर्तें पूरी करने वाले सबमिशन पर चलता है, फ़िलहाल कम से कम 300 शब्दों का गद्य। इंसान-और-AI के मिले-जुले दस्तावेज़ों पर वह कम भरोसेमंद है, वाक्य स्तर पर उसकी फ़ॉल्स पॉज़िटिव समस्या दर्ज है, और Turnitin खुद प्रशिक्षकों से कहता है कि स्कोर कभी भी अकादमिक कदाचार के फ़ैसले का अकेला आधार नहीं होना चाहिए। तो क्या Turnitin AI पकड़ सकता है? हां। क्या वह साबित कर सकता है कि आपने इस्तेमाल किया? नहीं, और हर असली मामला उसी खाई में तय होता है।

Turnitin का AI राइटिंग इंडिकेटर कैसे काम करता है

Turnitin आपके निबंध की तुलना ChatGPT आउटपुट के किसी डेटाबेस से नहीं करता। इसके बजाय, वह आपके दस्तावेज़ को कुछ सौ शब्दों के ओवरलैप करते खंडों में तोड़ता है, फिर हर वाक्य को इस पर स्कोर करता है कि वह सांख्यिकीय रूप से कितना प्रेडिक्टेबल है। लैंग्वेज मॉडल बार-बार सबसे संभावित अगला शब्द चुनकर लिखते हैं, जिससे असामान्य रूप से चिकना, एकसमान, कम-आश्चर्य वाला टेक्स्ट बनता है। इंसानी लेखन ज़्यादा बिखरा हुआ है: वाक्यों की लंबाई बदलती है, शब्द चयन कभी-कभी अजीब होते हैं, और लय चढ़ती-उतरती है।

इसका ज़्यादातर हिस्सा दो सिग्नल चलाते हैं: परप्लेक्सिटी, यानी आपके शब्द चयन कितने प्रेडिक्टेबल हैं, और बर्स्टीनेस, यानी आपकी वाक्य संरचना कितनी बदलती है। अगर कोई पैसेज लगातार चिकना और लगातार एकसमान है, तो मॉडल उसके वाक्यों को संभावित AI चिह्नित करता है। हम इस तंत्र को AI डिटेक्टर कैसे काम करते हैं गाइड में ज़्यादा गहराई से कवर करते हैं, लेकिन मुख्य बात सरल है: Turnitin मशीनी लेखन का सांख्यिकीय फ़िंगरप्रिंट पकड़ता है, किसी खास चैटबॉट की सामग्री नहीं।

प्रतिशत स्कोर का असल मतलब क्या है

प्रशिक्षकों को जो संख्या दिखती है वह आपके दस्तावेज़ के उन योग्य वाक्यों का प्रतिशत है जिन्हें मॉडल AI-जनरेटेड मानता है। 40% स्कोर का मतलब यह नहीं कि Turnitin को 40% यक़ीन है कि आपने नक़ल की। मतलब है कि आपके गद्य के लगभग 40% वाक्य मॉडल को मशीन-लिखित लगे। ये दोनों बहुत अलग दावे हैं, और इन्हें गड्डमड्ड करना कदाचार की मीटिंगों की सबसे आम ग़लती है।

दो ब्योरे जानने लायक़ हैं। पहला, Turnitin 1% से 19% के बीच के स्कोर एस्टरिस्क के साथ दिखाता है क्योंकि उसकी अपनी रिसर्च ने पाया कि कम स्कोर में फ़ॉल्स पॉज़िटिव की संभावना ज़्यादा है, और कुछ संस्थान रिपोर्टें ऐसे कॉन्फ़िगर करते हैं कि वह दायरा पूरी तरह छिप जाए। दूसरा, इंडिकेटर उस टेक्स्ट को अनदेखा करता है जो योग्य नहीं है, जैसे बुलेट लिस्ट, कोड, टेबल और बहुत छोटे वाक्य, इसलिए प्रतिशत आपके दस्तावेज़ के सिर्फ़ एक हिस्से का वर्णन करता है।

Turnitin का AI डिटेक्शन कितना सटीक है?

Turnitin का प्रकाशित दावा है कि इंडिकेटर AI लेखन को लगभग 98% सटीकता से पहचानता है और उन पेपरों के लिए दस्तावेज़-स्तरीय फ़ॉल्स पॉज़िटिव दर 1% से नीचे रखता है जिनमें 20% से ज़्यादा टेक्स्ट AI-जनरेटेड हो। ये आंकड़े Turnitin की अपनी लैब टेस्टिंग से आते हैं, और वे एक खास परिदृश्य का वर्णन करते हैं: अंग्रेज़ी गद्य में लगभग बिना-एडिट AI टेक्स्ट।

स्वतंत्र जांच कम चापलूस रही है। लॉन्च के कुछ ही समय बाद Turnitin ने माना कि वाक्य-स्तर के फ़ॉल्स पॉज़िटिव उम्मीद से ज़्यादा थे, इंसानी और AI लेखन के मिश्रण वाले दस्तावेज़ों में 4% के क़रीब। 2023 में टूल परखने वाले पत्रकारों ने पाया कि वह हाइब्रिड निबंधों पर लड़खड़ाया, AI पैसेज चूक गया और इंसानी पैसेज फ़्लैग कर बैठा। और अगस्त 2023 में Vanderbilt University ने यह कहते हुए फ़ीचर सार्वजनिक रूप से बंद कर दिया कि फ़ॉल्स पॉज़िटिव का जोखिम कार्रवाई करने लायक़ नहीं था। Turnitin AI डिटेक्शन की सटीकता का निष्पक्ष सार: शुद्ध, बिना-एडिट ChatGPT आउटपुट पर मज़बूत, बीच की हर चीज़ पर उल्लेखनीय रूप से कमज़ोर।

आपका शिक्षक असल में क्या देखता है

छात्र आमतौर पर AI स्कोर देख ही नहीं सकते। इंडिकेटर सिमिलैरिटी रिपोर्ट के प्रशिक्षक-व्यू में एक छोटे प्रतिशत बैज के रूप में दिखता है, प्लेजरिज़्म स्कोर से अलग। उस पर क्लिक करने से एक रिपोर्ट खुलती है जिसमें फ़्लैग हुए वाक्य हाइलाइट होते हैं, एक रंग AI-जनरेटेड आंके गए टेक्स्ट के लिए और दूसरा उस टेक्स्ट के लिए जिसे AI-जनरेटेड और फिर किसी टूल से पैराफ़्रेज़ किया गया माना गया।

उस स्क्रीन का प्रशिक्षक क्या करते हैं, यह बेहद अलग-अलग है। Turnitin का अपना मार्गदर्शन उनसे कहता है कि स्कोर को बातचीत शुरू करने का संकेत मानें, फ़ैसला नहीं, और कई विश्वविद्यालयों ने वह सावधानी नीति में लिख ली है। व्यवहार में, वैसे मज़बूत पेपर पर 15% स्कोर अक्सर अनदेखा होता है, जबकि 80% स्कोर आपकी ड्राफ्ट हिस्ट्री, आपके उद्धरणों और निबंध की आपके पिछले लेखन से तुलना की क़रीबी पड़ताल शुरू करा देता है। संख्या फ़ाइल खोलती है; बंद इंसान करता है।

क्या Turnitin पैराफ़्रेज़ या ह्यूमनाइज़ किया टेक्स्ट पकड़ता है?

कभी-कभी, और हथियारों की होड़ यहीं बसती है। 2024 में Turnitin ने AI पैराफ़्रेज़िंग डिटेक्शन जोड़ा, एक परत जो उस टेक्स्ट को पहचानने के लिए ट्रेन की गई है जिसे LLM ने जनरेट किया और फिर पैराफ़्रेज़िंग टूल से गुज़ारा गया। सस्ती पैराफ़्रेज़िंग, यानी मूल वाक्य संरचना बरकरार रखने वाले सिनोनिम बदलाव, ठीक वही है जो यह परत पकड़ती है, क्योंकि शब्द बदलने के बाद भी मशीनी टेक्स्ट का सांख्यिकीय ढांचा बचा रहता है।

गहरी री-राइटिंग अलग कहानी है। जब वाक्य संरचना, लय और वाक्यांश सचमुच नए सिरे से बनते हैं, तो वह फ़िंगरप्रिंट धुंधला जाता है जिस पर डिटेक्टर टिका है। थिसॉरस-पास और असली ह्यूमनाइज़ेशन का यही फ़र्क़ है, और इसीलिए एक गंभीर मुफ़्त AI ह्यूमनाइज़र नतीजों पर भरोसा मांगने के बजाय पहले-और-बाद के डिटेक्शन स्कोर दिखाता है। अपने दोबारा लिखे टेक्स्ट को असली डिटेक्टरों पर परखना ही यह जानने का इकलौता ईमानदार तरीक़ा है कि बदलाव काम कर गया या नहीं।

क्या वह खुद आपके एडिट किए AI टेक्स्ट को पकड़ता है?

हल्का एडिट किया AI टेक्स्ट आमतौर पर फिर भी फ़्लैग होता है। मुट्ठी भर शब्द बदलना, इंट्रो हटाना, या दो पैराग्राफ़ों का क्रम बदलना उन वाक्य-स्तरीय सांख्यिकियों को नहीं बदलता जो डिटेक्टर मापता है, इसलिए दस्तावेज़ का ज़्यादातर हिस्सा अब भी मशीनी लेखन जैसा पढ़ा जाता है। छात्र इस पर नियमित रूप से हैरान होते हैं: पंद्रह मिनट की पॉलिशिंग असली मेहनत लगती है, लेकिन वह स्कोर को मुश्किल से हिलाती है।

भारी री-राइटिंग को पकड़ना कहीं मुश्किल है, और Turnitin खुद यह कहता है। उसका दस्तावेज़ीकरण नोट करता है कि मिश्रित लेखकत्व वाले दस्तावेज़ों पर विश्वसनीयता गिरती है, और कम-स्कोर वाला एस्टरिस्क ठीक इसीलिए मौजूद है। अगर आपने ChatGPT को आउटलाइन या रफ़ ड्राफ्ट के लिए इस्तेमाल किया और फिर हर वाक्य अपनी आवाज़, अपने उदाहरणों और अपने ट्रांज़िशन के साथ दोबारा लिखा, तो अंतिम टेक्स्ट किसी भी सांख्यिकीय पैमाने से मोटे तौर पर आपका है। डिटेक्टर मशीनी गद्य ढूंढने में अच्छा है। उसके नीचे के विचारों को देखने का उसके पास कोई ज़रिया नहीं।

GPT-4, Claude, Gemini: क्या मॉडल से फ़र्क़ पड़ता है?

आपकी उम्मीद से कम। Turnitin ने अपने डिटेक्टर को किसी एक प्रोडक्ट पर नहीं, बल्कि एक श्रेणी के रूप में लार्ज लैंग्वेज मॉडलों के आउटपुट पर ट्रेन किया, और हर बड़ा चैट मॉडल एक ही बुनियादी आदत साझा करता है: सबसे संभावित अगले शब्द की भविष्यवाणी। GPT-4o, Claude और Gemini का डिफ़ॉल्ट आउटपुट वही चिकना, एकसमान फ़िंगरप्रिंट ढोता है, और टेस्टिंग लगातार दिखाती है कि टेक्स्ट बिना-एडिट हो तो Turnitin तीनों को ऊंची दरों पर फ़्लैग करता है।

दो बारीक़ियां असली हैं। नए मॉडल उस GPT-3.5 टेक्स्ट से मामूली कम प्रेडिक्टेबल हैं जिस पर डिटेक्टर मूल रूप से ट्यून हुआ था, इसलिए फ़्रंटियर मॉडलों पर डिटेक्शन दरें Turnitin के री-ट्रेन होने तक थोड़ी गिर सकती हैं, और वह नियमित रूप से री-ट्रेन करता है। और "इंसान की तरह लिखो" या "बर्स्टीनेस जोड़ो" जैसी प्रॉम्प्टिंग तरकीबें सतही शैली को लोगों की सोच से कहीं कम बदलती हैं, क्योंकि पोशाक के नीचे मॉडल अब भी हाई-प्रोबेबिलिटी शब्द ही चुन रहा है। चैटबॉट बदलना कोई डिटेक्शन रणनीति नहीं है।

छात्र असल में कैसे पकड़े जाते हैं

अकेला ऊंचा AI स्कोर शायद ही किसी को डुबोता है। असली मामले सबूतों की कड़ी से बनते हैं, और इंडिकेटर सिर्फ़ पहली कड़ी है। प्रशिक्षक जो पैटर्न बताते हैं वह एक-सा है: ऊंचा प्रतिशत, साथ में बिना वर्ज़न हिस्ट्री का दस्तावेज़, साथ में ऐसा लेखन जो छात्र के पिछले काम से साफ़ ज़्यादा चमकाया हुआ या ज़्यादा जेनेरिक है, साथ में सामग्री की दिक़्क़तें जैसे अस्पष्ट दलीलें या ऐसे उद्धरण जो मौजूद ही नहीं।

आखिरी बात पर ज़ोर ज़रूरी है। गढ़े हुए संदर्भ AI कदाचार के मामलों की सबसे घातक चीज़ हैं, क्योंकि उन्हें लेखन-शैली से नहीं समझाया जा सकता। डिटेक्टर स्कोर से बहस हो सकती है; कभी प्रकाशित ही न हुए पेपर के हवाले से नहीं। अगर आप AI टूल किसी भी अनुमत रूप में इस्तेमाल करते हैं, तो हर स्रोत हाथ से सत्यापित कीजिए, अपने ड्राफ्ट संभालिए, और अपने बाक़ी काम से मेल खाती आवाज़ में लिखिए। जो छात्र पकड़े जाते हैं, वे लगभग कभी अकेले प्रतिशत से नहीं पकड़े जाते।

झूठा आरोप लगे तो क्या करें

फ़ॉल्स पॉज़िटिव होते हैं, और Turnitin यह मानता है। रिसर्च ने यह भी दिखाया है कि AI डिटेक्टर एक वर्ग के तौर पर गैर-देशी अंग्रेज़ी लेखकों को बढ़ी हुई दरों पर फ़्लैग करते हैं, शायद इसलिए कि सावधान, सीखी हुई अंग्रेज़ी ज़्यादा एकसमान और प्रेडिक्टेबल होती है, ठीक वही गुण जिन्हें डिटेक्टर मशीन जैसा पढ़ते हैं। अगर आपने पेपर ईमानदारी से लिखा और फ़्लैग हो गए, तो आपके पास बचाव-योग्य स्थिति है, इसलिए न घबराइए और न ही उस चीज़ की स्वीकारोक्ति कीजिए जो आपने की ही नहीं।

मीटिंग से पहले अपनी सबूत-फ़ाइल तैयार कीजिए। Google Docs या Word की वर्ज़न हिस्ट्री आपके पास सबसे मज़बूत सबूत है, क्योंकि वह निबंध को घंटों में वाक्य-दर-वाक्य बढ़ते दिखाती है। उसमें अपने नोट्स, आउटलाइन, ब्राउज़र की रिसर्च हिस्ट्री और पहले के ग्रेडेड लेखन जोड़िए जो आपकी शैली दिखाते हैं। असली रिपोर्ट देखने की मांग कीजिए, और Turnitin की अपनी प्रकाशित चेतावनियों की ओर इशारा कीजिए: कम स्कोर वाला एस्टरिस्क, वाक्य-स्तरीय फ़ॉल्स पॉज़िटिव दर, और कंपनी का स्पष्ट बयान कि इंडिकेटर को अकेले सबूत के रूप में इस्तेमाल नहीं करना चाहिए। ज़्यादातर संस्थानों में अपील प्रक्रिया है। उसे शांति से और लिखित में इस्तेमाल कीजिए।

सबमिट करने से पहले अपना काम जांच लें

व्यावहारिक खीझ यह है: छात्र सबमिट करने से पहले Turnitin का AI स्कोर नहीं देख सकते, इसलिए समस्या का पता अक्सर सबसे बुरे मुमकिन पल में चलता है। तोड़ यह है कि पहले अपना ड्राफ्ट स्वतंत्र डिटेक्टरों पर परखिए। वे Turnitin के हूबहू नहीं हैं, लेकिन वही सांख्यिकीय सिग्नल मापते हैं, और जो ड्राफ्ट कई डिटेक्टरों पर साफ़ स्कोर करता है, उसके इंडिकेटर को जगाने की संभावना बहुत कम है।

Humanize AI ठीक इसी के लिए बना है। टेक्स्ट पेस्ट कीजिए, या PDF या DOCX फ़ाइल अपलोड कीजिए, और कुछ भी बदलने से पहले आपको दो स्वतंत्र डिटेक्टरों से लाइव AI प्रोबेबिलिटी स्कोर मिलता है, फिर ह्यूमनाइज़ करने के बाद ताज़ा स्कोर, 40 भाषाओं में से किसी में भी, बिना साइनअप और बिना शब्द सीमा के। अगर स्कोर उम्मीद से ऊंचा निकले, तो हमारी गाइड Turnitin AI डिटेक्शन को बायपास कैसे करें उसे ईमानदारी से घटाने का रास्ता दिखाती है, जिसमें ज़्यादातर काम आपकी अपनी आवाज़ करती है।

अक्सर पूछे जाने वाले सवाल