Обнаруживает ли Turnitin ChatGPT? Честный ответ

Прямой ответ: да, но с важными оговорками

Turnitin включает индикатор ИИ-текста в свои отчеты о совпадениях с апреля 2023 года, и он был создан специально для выявления текста больших языковых моделей вроде ChatGPT. Если вы вставите ответ ChatGPT прямо в эссе и отправите его, с очень высокой вероятностью Turnitin пометит большую его часть. Это факт.

Но оговорки не менее важны. Индикатор - это статистическая оценка, а не доказательство. Он работает только с текстами, которые соответствуют минимальным требованиям, сейчас это не менее 300 слов прозы. Он менее надежен на смешанных документах, где есть и человеческий, и ИИ-текст, у него задокументирована проблема ложных срабатываний на уровне предложений, и сам Turnitin говорит преподавателям, что оценка никогда не должна быть единственным основанием для решения об академическом нарушении. Так может ли Turnitin обнаружить ИИ? Да. Может ли он доказать, что вы им пользовались? Нет, и именно в этом зазоре решается каждый реальный случай.

Как работает индикатор ИИ-текста Turnitin

Turnitin не сравнивает ваше эссе с базой ответов ChatGPT. Вместо этого он разбивает документ на перекрывающиеся сегменты по несколько сотен слов и оценивает каждое предложение по тому, насколько оно статистически предсказуемо. Языковые модели пишут, раз за разом выбирая наиболее вероятное следующее слово, что дает необычно гладкий, ровный текст без сюрпризов. Человеческое письмо более хаотично: длина предложений меняется, выбор слов иногда странный, а ритм то нарастает, то спадает.

Два сигнала, которые определяют почти все, - это перплексия, то есть насколько предсказуем ваш выбор слов, и вариативность (burstiness), то есть насколько разнообразна структура ваших предложений. Если фрагмент стабильно гладкий и стабильно ровный, модель помечает его предложения как вероятный ИИ. Мы подробно разбираем механику в гайде о том, как работают детекторы ИИ, но суть проста: Turnitin обнаруживает статистический отпечаток машинного письма, а не содержимое какого-то конкретного чат-бота.

Что на самом деле означает процентная оценка

Число, которое видят преподаватели, - это доля подходящих для анализа предложений в вашем документе, которые модель считает сгенерированными ИИ. Оценка 40% не означает, что Turnitin на 40% уверен в вашем обмане. Она означает, что примерно 40% предложений вашей прозы выглядели для модели машинными. Это очень разные утверждения, и их смешение - самая частая ошибка на разборах о нарушениях.

Стоит знать две детали. Во-первых, Turnitin показывает оценки от 1% до 19% со звездочкой, потому что его собственное исследование показало, что низкие оценки чаще содержат ложные срабатывания, а некоторые учебные заведения настраивают отчеты так, чтобы полностью скрывать этот диапазон. Во-вторых, индикатор игнорирует текст, который не подходит для анализа, например маркированные списки, код, таблицы и очень короткие предложения, поэтому процент описывает только часть вашего документа.

Насколько точна детекция ИИ в Turnitin?

Официально Turnitin заявляет, что индикатор распознает ИИ-текст с точностью около 98%, удерживая долю ложных срабатываний на уровне документа ниже 1% для работ, где более 20% текста сгенерировано ИИ. Эти цифры получены в лабораторных тестах самого Turnitin и описывают конкретный сценарий: практически неотредактированный ИИ-текст в английской прозе.

Независимая проверка была менее лестной. Вскоре после запуска Turnitin признал, что ложных срабатываний на уровне предложений больше, чем ожидалось, ближе к 4% в документах со смесью человеческого и ИИ-текста. Журналисты, тестировавшие инструмент в 2023 году, обнаружили, что он спотыкается на гибридных эссе, пропуская фрагменты ИИ и помечая человеческие. А в августе 2023 года Университет Вандербильта публично отключил эту функцию, посчитав риск ложных срабатываний слишком высоким. Честный итог по точности детекции ИИ в Turnitin: она сильна на чистом, неотредактированном выводе ChatGPT и заметно слабее на всем, что между.

Что на самом деле видит ваш преподаватель

Студенты обычно вообще не видят оценку ИИ. Индикатор появляется в преподавательском виде отчета о совпадениях как небольшой процентный значок, отдельно от оценки за плагиат. Клик по нему открывает отчет, где помеченные предложения подсвечены: один цвет для текста, признанного сгенерированным ИИ, и другой для текста, который был сгенерирован ИИ и затем перефразирован инструментом.

Что преподаватели делают с этим экраном, сильно различается. Собственные рекомендации Turnitin говорят им воспринимать оценку как сигнал для начала разговора, а не как вердикт, и многие университеты закрепили эту осторожность в своих регламентах. На практике 15% на в остальном сильной работе часто игнорируют, а 80% запускают более пристальный взгляд на историю ваших черновиков, ваши цитаты и на то, как эссе соотносится с вашими прежними текстами. Число открывает дело; закрывает его человек.

Обнаруживает ли Turnitin перефразированный или гуманизированный текст?

Иногда, и именно здесь идет гонка вооружений. В 2024 году Turnitin добавил детекцию ИИ-перефразирования - слой, обученный распознавать текст, который был сгенерирован LLM, а затем прогнан через инструмент перефразирования. Дешевое перефразирование, то есть замена синонимов при сохранении исходной структуры предложений, - именно то, что ловит этот слой, потому что статистический скелет машинного текста переживает замену слов.

Глубокое переписывание - другая история. Когда структура предложений, ритм и формулировки действительно перестроены, отпечаток, на который опирается детектор, тускнеет. В этом разница между проходом по словарю синонимов и настоящей гуманизацией, и именно поэтому серьезный бесплатный ИИ-хуманизатор показывает вам оценки детекторов до и после, а не просит верить на слово. Проверка переписанного текста реальными детекторами - единственный честный способ узнать, сработало ли преобразование.

Ловит ли он текст ИИ, который вы отредактировали сами?

Слегка отредактированный ИИ-текст обычно все равно помечается. Замена горстки слов, удаление вступления или перестановка двух абзацев не меняет статистику на уровне предложений, которую измеряет детектор, поэтому большая часть документа по-прежнему читается как машинное письмо. Студентов это регулярно удивляет: пятнадцать минут полировки ощущаются как настоящая работа, но оценку они почти не двигают.

Сильно переписанный текст поймать гораздо труднее, и Turnitin сам это говорит. В его документации отмечено, что надежность падает на документах со смешанным авторством, именно поэтому существует звездочка на низких оценках. Если вы использовали ChatGPT для плана или черновика, а затем переписали каждое предложение своим голосом, со своими примерами и своими переходами, финальный текст по любым статистическим меркам в основном ваш. Детектор хорошо находит машинную прозу. Он никак не может увидеть идеи под ней.

GPT-4, Claude, Gemini: важна ли модель?

Меньше, чем хотелось бы. Turnitin обучал свой детектор на выводе больших языковых моделей как категории, а не одного продукта, и у всех крупных чат-моделей одна и та же базовая привычка: предсказывать наиболее вероятное следующее слово. Вывод по умолчанию у GPT-4o, Claude и Gemini несет один и тот же гладкий, ровный отпечаток, и тесты стабильно показывают, что Turnitin помечает все три с высокой частотой, когда текст не отредактирован.

Два нюанса реальны. Новые модели чуть менее предсказуемы, чем текст GPT-3.5, на котором детектор изначально настраивался, поэтому частота обнаружения на передовых моделях может немного проседать, пока Turnitin не переобучится, что он делает регулярно. А трюки с промптами вроде "пиши как человек" или "добавь вариативности" меняют поверхностный стиль куда меньше, чем кажется, потому что под этим костюмом модель по-прежнему выбирает высоковероятные слова. Смена чат-бота - не стратегия против детекции.

Как студенты попадаются на самом деле

Одна высокая оценка ИИ редко кого-то топит. Реальные дела строятся на цепочке улик, и индикатор - лишь первое звено. Паттерн, который описывают преподаватели, одинаков: высокий процент, плюс документ без истории версий, плюс текст заметно более гладкий или более обезличенный, чем прежние работы студента, плюс проблемы с содержанием вроде расплывчатых аргументов или несуществующих ссылок.

Последнее стоит подчеркнуть. Сфабрикованные источники - самая убийственная улика в делах об ИИ-нарушениях, потому что их нельзя объяснить стилем письма. С оценкой детектора можно спорить; с процитированной статьей, которая никогда не публиковалась, - нет. Если вы вообще пользуетесь инструментами ИИ, в любом разрешенном виде, проверяйте каждый источник вручную, храните черновики и пишите голосом, согласующимся с остальными вашими работами. Тех, кого ловят, почти никогда не ловят по одному лишь проценту.

Что делать при ложном обвинении

Ложные срабатывания случаются, и Turnitin это признает. Исследования также показали, что детекторы ИИ как класс чаще помечают неносителей английского, вероятно потому, что аккуратный выученный английский более однороден и предсказуем - ровно те качества, которые детекторы считают машинными. Если вы написали работу честно и получили флаг, у вас есть защитимая позиция, так что не паникуйте и не признавайтесь в том, чего не делали.

Соберите доказательства до встречи. История версий из Google Docs или Word - самый сильный ваш артефакт, потому что она показывает, как эссе растет предложение за предложением на протяжении часов. Добавьте заметки, планы, историю поисковых запросов и более ранние оцененные работы, показывающие ваш стиль. Попросите показать сам отчет и укажите на опубликованные оговорки самого Turnitin: звездочку на низких оценках, долю ложных срабатываний на уровне предложений и прямое заявление компании, что индикатор не должен использоваться как единственное доказательство. В большинстве заведений есть процедура апелляции. Пользуйтесь ею спокойно и письменно.

Проверьте работу до отправки

Практическая досада вот в чем: студенты не видят оценку ИИ Turnitin до отправки, поэтому о проблеме вы часто узнаете в худший из возможных моментов. Обходной путь - сначала проверить черновик независимыми детекторами. Они не идентичны Turnitin, но измеряют те же статистические сигналы, и черновик с чистыми оценками у нескольких детекторов вряд ли зажжет индикатор.

Именно для этого создан Humanize AI. Вставьте текст или загрузите PDF или DOCX - и вы получите живую оценку вероятности ИИ от двух независимых детекторов до любых изменений, а затем свежую оценку после гуманизации, на любом из 40 языков, без регистрации и лимитов слов. Если оценка выше ожидаемой, наш гайд о том, как обойти детекцию ИИ в Turnitin, показывает, как честно ее снизить, где основную работу делает ваш собственный голос.

Часто задаваемые вопросы