Apakah Turnitin Mendeteksi ChatGPT? Jawaban Jujurnya

Jawaban langsung: ya, dengan catatan penting

Turnitin telah menyertakan indikator tulisan AI dalam laporan kemiripannya sejak April 2023, dan ia dibangun khusus untuk mengenali teks dari model bahasa besar seperti ChatGPT. Jika Anda menempel jawaban ChatGPT langsung ke esai dan mengumpulkannya, kemungkinan sangat besar Turnitin akan menandai sebagian besarnya. Bagian itu sudah pasti.

Catatannya sama pentingnya. Indikator itu adalah perkiraan statistik, bukan bukti. Ia hanya berjalan pada kiriman yang memenuhi syarat minimum, saat ini setidaknya 300 kata prosa. Ia kurang andal pada dokumen campuran manusia-dan-AI, ia punya masalah positif palsu yang terdokumentasi di tingkat kalimat, dan Turnitin sendiri memberi tahu pengajar bahwa skor tidak boleh menjadi satu-satunya dasar keputusan pelanggaran akademik. Jadi bisakah Turnitin mendeteksi AI? Ya. Bisakah ia membuktikan Anda memakainya? Tidak, dan celah itulah tempat setiap kasus nyata diputuskan.

Cara kerja indikator tulisan AI Turnitin

Turnitin tidak membandingkan esai Anda dengan basis data keluaran ChatGPT. Sebaliknya, ia memecah dokumen Anda menjadi segmen-segmen tumpang tindih berisi beberapa ratus kata, lalu menilai setiap kalimat dari seberapa dapat diprediksi secara statistik. Model bahasa menulis dengan berulang kali memilih kata berikutnya yang paling mungkin, yang menghasilkan teks luar biasa mulus, rata, dan minim kejutan. Tulisan manusia lebih berantakan: panjang kalimat bervariasi, pilihan kata sesekali ganjil, dan ritmenya naik turun.

Dua sinyal yang menggerakkan sebagian besar hal ini adalah perplexity, yaitu seberapa dapat diprediksi pilihan kata Anda, dan burstiness, yaitu seberapa besar struktur kalimat Anda bervariasi. Jika sebuah bagian konsisten mulus dan konsisten rata, model menandai kalimat-kalimatnya sebagai kemungkinan AI. Kami membahas mekanismenya lebih dalam pada panduan kami tentang cara kerja detektor AI, tetapi poin kuncinya sederhana: Turnitin mendeteksi sidik jari statistik tulisan mesin, bukan isi chatbot tertentu.

Apa arti skor persentase sebenarnya

Angka yang dilihat pengajar adalah persentase kalimat yang memenuhi syarat dalam dokumen Anda yang diyakini model dihasilkan AI. Skor 40% tidak berarti Turnitin 40% yakin Anda curang. Artinya kira-kira 40% kalimat prosa Anda tampak seperti tulisan mesin bagi model. Itu dua klaim yang sangat berbeda, dan mencampuradukkannya adalah kesalahan paling umum dalam rapat pelanggaran.

Dua detail layak diketahui. Pertama, Turnitin menampilkan skor antara 1% dan 19% dengan tanda bintang karena risetnya sendiri menemukan skor rendah lebih mungkin mengandung positif palsu, dan sebagian institusi mengonfigurasi laporan untuk menyembunyikan rentang itu sepenuhnya. Kedua, indikator mengabaikan teks yang tidak memenuhi syarat, seperti daftar butir, kode, tabel, dan kalimat sangat pendek, sehingga persentase itu hanya menggambarkan sebagian dokumen Anda.

Seberapa akurat deteksi AI Turnitin?

Klaim terpublikasi Turnitin adalah indikatornya mengidentifikasi tulisan AI dengan akurasi sekitar 98% sambil menjaga tingkat positif palsu di level dokumen di bawah 1% untuk makalah yang lebih dari 20% teksnya dihasilkan AI. Angka-angka itu berasal dari pengujian laboratorium Turnitin sendiri, dan menggambarkan skenario spesifik: teks AI yang sebagian besar tak disunting dalam prosa bahasa Inggris.

Penelitian independen kurang memuji. Tak lama setelah peluncuran, Turnitin mengakui positif palsu tingkat kalimat lebih tinggi dari perkiraan, mendekati 4% pada dokumen dengan campuran tulisan manusia dan AI. Jurnalis yang menguji alat itu pada 2023 menemukan ia tersandung pada esai hibrida, melewatkan bagian AI dan menandai bagian manusia. Dan pada Agustus 2023, Vanderbilt University secara terbuka menonaktifkan fitur itu dengan alasan risiko positif palsunya terlalu tinggi untuk dijadikan dasar tindakan. Rangkuman yang adil tentang akurasi deteksi AI Turnitin: kuat pada keluaran ChatGPT murni yang tak disunting, jauh lebih lemah pada segala hal di antaranya.

Apa yang sebenarnya dilihat guru Anda

Pelajar biasanya sama sekali tidak bisa melihat skor AI. Indikatornya muncul di tampilan pengajar pada laporan kemiripan sebagai lencana persentase kecil, terpisah dari skor plagiarisme. Mengekliknya membuka laporan tempat kalimat yang ditandai disorot, dengan satu warna untuk teks yang dinilai dihasilkan AI dan warna lain untuk teks yang dinilai dihasilkan AI lalu diparafrasakan dengan alat.

Apa yang dilakukan pengajar dengan layar itu sangat bervariasi. Panduan Turnitin sendiri menyuruh mereka memperlakukan skor sebagai sinyal untuk memulai percakapan, bukan vonis, dan banyak universitas menuliskan kehati-hatian itu ke dalam kebijakan. Dalam praktiknya, skor 15% pada makalah yang selain itu kuat sering diabaikan, sementara skor 80% memicu penelusuran lebih dekat atas riwayat draf Anda, sitasi Anda, dan bagaimana esai itu dibandingkan tulisan Anda sebelumnya. Angkanya membuka berkas; manusialah yang menutupnya.

Apakah Turnitin mendeteksi teks yang diparafrasakan atau dihumanisasi?

Kadang-kadang, dan di sinilah perlombaan senjata berlangsung. Pada 2024 Turnitin menambahkan deteksi parafrasa AI, sebuah lapisan yang dilatih mengenali teks yang dihasilkan LLM lalu dijalankan lewat alat parafrasa. Parafrasa murahan, yaitu tukar sinonim yang mempertahankan struktur kalimat asli, persis yang ditangkap lapisan ini, karena kerangka statistik teks mesin selamat dari perubahan kata.

Penulisan ulang yang lebih dalam adalah cerita lain. Ketika struktur kalimat, ritme, dan frasa benar-benar dibangun ulang, sidik jari yang diandalkan detektor memudar. Itulah beda antara sapuan tesaurus dan humanisasi sungguhan, dan itu alasan AI humanizer gratis yang serius menampilkan skor deteksi sebelum dan sesudah alih-alih meminta Anda menerima hasil begitu saja. Menguji teks tulisan ulang Anda terhadap detektor sungguhan adalah satu-satunya cara jujur mengetahui apakah transformasinya berhasil.

Apakah ia menangkap teks AI yang Anda sunting sendiri?

Teks AI yang disunting ringan biasanya tetap ditandai. Mengubah segelintir kata, menghapus pembuka, atau menata ulang dua paragraf tidak mengubah statistik tingkat kalimat yang diukur detektor, sehingga sebagian besar dokumen tetap terbaca sebagai tulisan mesin. Pelajar rutin terkejut oleh ini: lima belas menit memoles terasa seperti kerja sungguhan, tetapi nyaris tidak menggeser skor.

Teks yang ditulis ulang besar-besaran jauh lebih sulit ditangkap, dan Turnitin mengatakannya sendiri. Dokumentasinya mencatat keandalan turun pada dokumen dengan kepengarangan campuran, dan itulah persisnya alasan tanda bintang skor rendah ada. Jika Anda memakai ChatGPT untuk kerangka atau draf kasar lalu menulis ulang setiap kalimat dengan suara Anda sendiri, dengan contoh Anda sendiri dan transisi Anda sendiri, teks akhirnya sebagian besar milik Anda menurut ukuran statistik mana pun. Detektor pandai menemukan prosa mesin. Ia tidak punya cara melihat gagasan di baliknya.

GPT-4, Claude, Gemini: apakah modelnya penting?

Kurang penting dari yang Anda harapkan. Turnitin melatih detektornya pada keluaran model bahasa besar sebagai kategori, bukan pada satu produk, dan setiap model obrolan utama berbagi kebiasaan dasar yang sama: memprediksi kata berikutnya yang paling mungkin. Keluaran bawaan dari GPT-4o, Claude, dan Gemini semuanya membawa sidik jari mulus dan rata yang sama, dan pengujian secara konsisten menunjukkan Turnitin menandai ketiganya pada tingkat tinggi saat teksnya tak disunting.

Dua nuansa memang nyata. Model yang lebih baru sedikit kurang dapat diprediksi dibanding teks GPT-3.5 yang semula menjadi acuan penyetelan detektor, sehingga tingkat deteksi pada model terdepan bisa turun sedikit sampai Turnitin melatih ulang, yang dilakukannya secara berkala. Dan trik prompt seperti "tulislah seperti manusia" atau "tambahkan burstiness" mengubah gaya permukaan jauh lebih sedikit daripada dugaan orang, karena model tetap memilih kata berprobabilitas tinggi di balik kostumnya. Berganti chatbot bukanlah strategi menghindari deteksi.

Bagaimana pelajar sebenarnya tertangkap

Skor AI tinggi saja jarang menenggelamkan siapa pun. Kasus nyata dibangun dari rantai bukti, dan indikator hanyalah mata rantai pertama. Pola yang digambarkan pengajar konsisten: persentase tinggi, plus dokumen tanpa riwayat versi, plus tulisan yang tampak jauh lebih rapi atau lebih generik daripada karya pelajar sebelumnya, plus masalah isi seperti argumen kabur atau sitasi yang tidak ada.

Yang terakhir itu layak ditekankan. Referensi rekaan adalah artefak paling memberatkan dalam kasus pelanggaran AI, karena tidak bisa dijelaskan dengan gaya menulis. Skor detektor bisa diperdebatkan; makalah yang dikutip tetapi tidak pernah terbit tidak bisa. Jika Anda memakai alat AI sama sekali, dalam kapasitas apa pun yang diizinkan, verifikasi setiap sumber secara manual, simpan draf Anda, dan menulislah dengan suara yang konsisten dengan karya Anda yang lain. Pelajar yang tertangkap hampir tidak pernah tertangkap oleh persentase semata.

Apa yang harus dilakukan jika Anda dituduh secara keliru

Positif palsu terjadi, dan Turnitin mengakuinya. Riset juga menunjukkan detektor AI sebagai kelompok menandai penulis non-natif bahasa Inggris pada tingkat lebih tinggi, kemungkinan karena bahasa Inggris yang cermat dan dipelajari cenderung lebih seragam dan dapat diprediksi, persis kualitas yang dibaca detektor sebagai khas mesin. Jika Anda menulis makalah dengan jujur dan ditandai, posisi Anda dapat dibela, jadi jangan panik dan jangan mengakui sesuatu yang tidak Anda lakukan.

Bangun berkas bukti Anda sebelum rapat. Riwayat versi dari Google Docs atau Word adalah artefak terkuat yang Anda miliki, karena menunjukkan esai tumbuh kalimat demi kalimat selama berjam-jam. Tambahkan catatan, kerangka, riwayat riset peramban, dan tulisan bernilai sebelumnya yang memperlihatkan gaya Anda. Minta melihat laporan yang sebenarnya, dan tunjuk catatan terpublikasi Turnitin sendiri: tanda bintang pada skor rendah, tingkat positif palsu di level kalimat, dan pernyataan eksplisit perusahaan bahwa indikator tidak boleh dipakai sebagai bukti tunggal. Sebagian besar institusi punya proses banding. Gunakan dengan tenang dan secara tertulis.

Periksa karya Anda sebelum mengumpulkan

Inilah frustrasi praktisnya: pelajar tidak bisa melihat skor AI Turnitin sebelum mengumpulkan, sehingga saat pertama Anda tahu ada masalah sering kali adalah momen terburuk. Jalan keluarnya adalah menguji draf Anda terhadap detektor independen lebih dulu. Mereka tidak identik dengan Turnitin, tetapi mengukur sinyal statistik yang sama, dan draf yang bersih di beberapa detektor sangat kecil kemungkinannya menyalakan indikator.

Inilah persisnya untuk apa Humanize AI dibuat. Tempel teks Anda, atau unggah file PDF atau DOCX, dan Anda mendapat skor probabilitas AI langsung dari dua detektor independen sebelum mengubah apa pun, lalu skor baru setelah humanisasi, dalam salah satu dari 40 bahasa, tanpa daftar dan tanpa batas kata. Jika skor Anda lebih tinggi dari perkiraan, panduan kami tentang cara melewati deteksi AI Turnitin memandu menurunkannya dengan jujur, dengan suara Anda sendiri yang mengerjakan sebagian besar tugas.

Pertanyaan yang sering diajukan