Детектор заподозрил ИИ в вашем тексте. Это ещё не доказательство обмана

Детектор помечает фрагмент текста как, вероятно, созданный с помощью ИИ. Процентный показатель выглядит убедительно точным, а само обвинение кажется окончательным. Однако ни этот балл, ни его внешняя строгость сами по себе не доказывают, как текст был написан на самом деле.

Конструктивная реакция состоит в том, чтобы проанализировать, что именно утверждает инструмент, сохранить свидетельства процесса написания работы и воспользоваться установленной в организации процедурой апелляции или пересмотра. Для преподавателей и руководителей соответствующая ответственность заключается в проведении справедливой проверки, а не в восприятии автоматической отметки как готового вердикта.

Правильно интерпретируйте показатели

Компания Turnitin поясняет, что ее показатель доли ИИ относится к объему подходящего для анализа текста, который ее модель определяет как предположительно созданный или измененный с помощью ИИ. Он не позиционируется как вероятность того, что учащийся сжульничал. В официальном руководстве также признается возможность ошибочной классификации и подчеркивается, что результат проверки не должен служить единственным основанием для принятия мер дисциплинарного воздействия. Руководство Turnitin по отчету об использовании ИИ-письма (AI Writing Report).

Эти различия принципиально важны. Утверждение о фрагментах текста, вероятностная оценка авторства и вывод о нарушении конкретного регламента — это совершенно разные вещи. Даже полезный инструмент первичного скрининга не способен определить, какую именно помощь допускали правила курса и что из этого автор раскрыл добровольно.

Прежде чем обсуждать результат, определите конкретный детектор, версию документа, соответствующие фрагменты и регламент, который предположительно был нарушен. Иначе обсуждение начнется с цифры, о значении которой стороны заранее не договорились.

Почему ложноположительные срабатывания требуют внимания

Исследование, освещенное Стэнфордским университетом в 2023 году, протестировало семь детекторов и выявило частые случаи ошибочной классификации эссе, написанных авторами, для которых английский язык не является родным. В выборке текстов TOEFL в рамках этого исследования средняя доля ложноположительных срабатываний превысила половину. Данный результат демонстрирует проблему непредвзятости в исследованных инструментах и выборках, а не является текущей оценкой погрешности для абсолютно каждого детектора. Материал Стэнфордского университета об исследовании.

Историческое исследование не должно необоснованно обобщаться до утверждения, что все продукты для обнаружения ведут себя одинаково сегодня. Точно так же появление новой модели у поставщика не отменяет необходимости интересоваться тем, как она оценивалась для конкретного языка, жанра и категории учащихся, где она используется.

Практический вопрос заключается в том, может ли учреждение подкрепить обвинение доказательствами, выходящими за рамки классификации на основе стиля. Авторы не должны быть вынуждены делать свой английский менее ясным или намеренно допускать ошибки, чтобы выглядеть человеком.

Если ваша работа была отмечена системой

Сохраните поданный документ и любые подлинные подтверждения процесса работы, которые уже имеются: планы, заметки, историю версий, список источников, комментарии и промежуточные черновики. Не фабрикуйте старые черновики и не изменяйте записи, чтобы сделать последовательность более убедительной.

Запросите фрагменты, вызвавшие вопросы, и письменное разъяснение того, как именно трактуется отчет. Затем последовательно объясните процесс своей работы: как вы выбирали аргументацию, какие источники читали, что менялось от черновика к черновику и к какой помощи вы прибегали. Укажите разрешенную проверку правописания, перевод или помощь ИИ, если регламент требует их раскрытия.

Краткий ответ может звучать так: «Я хотел бы понять, какими доказательствами подкреплен этот вывод. Пожалуйста, предоставьте отмеченные фрагменты и действующее правило. Я могу предоставить имеющиеся черновики и объяснить, как выстраивалась аргументация». Это предлагаемый подход к коммуникации, а не юридическая консультация или обещание того, что конкретная апелляция увенчается успехом.

Если первоначальное обсуждение не разрешило проблему, воспользуйтесь официальным порядком пересмотра или подачи апелляции. Сосредоточьтесь на доказательствах и правилах, действовавших на момент выполнения вами работы.

Если вы оцениваете чужую работу

Начните с обозначения возникших сомнений, не рассматривая их как уже доказанный факт нарушения. Предложите автору объяснить логику фрагмента, обсудить процитированный источник или показать имеющиеся черновики. Отсутствие истории версий само по себе не является доказательством нарушения: люди используют разные инструменты и рабочие процессы для написания текстов.

Применяйте одну и ту же процедуру последовательно ко всем. На автора, владеющего несколькими языками, не должно возлагаться повышенное бремя доказывания лишь потому, что его словарный запас или структура предложений отличаются от ожиданий проверяющего.

Также отделяйте низкое качество научной работы от спорного авторства. Вымышленную ссылку, необоснованный довод или ошибочное понимание можно разобрать напрямую, независимо от того, какой инструмент сгенерировал фразу. Оценка самой сути работы полезнее, чем сведение любой проблемы с качеством к вопросу «Был ли задействован ИИ?».

Формулируйте ожидания на будущее более четко

До начала выполнения задания четко определите, какие способы использования разрешены, а о чем необходимо заявить. Формулировка «Не списывать» не дает понимания, различаются ли между собой мозговой штурм, исправление грамматики, перевод или составление черновика.

Для исследовательской работы подумайте о том, чтобы требовать краткую записку о ходе процесса с объяснением того, как студент отбирал источники и выстраивал аргументацию. Для рабочего отчета запрашивайте подтверждения значимых утверждений и указывайте конкретное лицо, ответственное за их проверку. Это предлагаемые методы оценивания, а не утверждение о том, что бумажная отчетность полностью исключает обман.

Не превращайте обнаружение в гонку вооружений, при которой авторы бесконечно перефразируют текст до тех пор, пока инструмент не покажет обнадеживающий результат. При этом текст оптимизируется под детектор, а не ради понимания, точности или честного раскрытия информации.

Справедливое решение строится на совокупности самой работы, процесса ее создания, применимых правил и возможности для автора дать ответ. Детектор может поднять вопрос. Он не должен служить окончательным ответом.