Turnitin — одна из самых известных и надежных моделей проверки на плагиат на рынке, широко используемая академическими учреждениями. В апреле 2023 года в систему была добавлена модель обнаружения искусственного интеллекта, а ее функции были расширены, чтобы идти в ногу с постоянно меняющимся миром искусственного интеллекта.
Но как работает эта новая модель обнаружения ИИ? И можно ли этому доверять? В этом руководстве мы рассмотрим детектор искусственного интеллекта Turnitin от А до Я, включая то, как он работает, как интерпретировать его результаты и насколько точен этот инструмент.
Итак, если вы готовы углубиться во все тонкости Turnitin, давайте начнем.
Как Turnitin работает для обнаружения ИИ?
Turnitin предлагает уникальный подход к обнаружению контента, созданного искусственным интеллектом. Он включает в себя сочетание передовых алгоритмов, машинного обучения и языкового анализа.
Эта система предназначена для идентификации фрагментов текста, шаблоны которых соответствуют генерируемым ИИ или моделям большого языка (LLM). К ним могут относиться ChatGPT-3, ChatGPT-3.5 и аналогичные модели AI.
Каким бы простым ни казалось это объяснение, в этот процесс входит гораздо больше, чем кажется на первый взгляд. Существует ряд шагов, которые инструмент обнаружения искусственного интеллекта Turnitin использует для пометки контента, созданного инструментами написания искусственного интеллекта, причем каждый шаг играет решающую роль в этом процессе. Эти шаги включают в себя:
- Обработка подачи: Когда вы отправляете задание через Turnitin, оно сначала разбивается на более мелкие части текста. Обычно это несколько сотен слов на часть, чтобы помочь проанализировать текст в контексте и повысить точность Turnitin.
- Оценка сегмента: Затем каждый сегмент текста оценивается моделью обнаружения ИИ по шкале от 0 до 1. Оценка 0 предполагает, что текст написан человеком, а оценка 1 указывает на то, что сегмент представляет собой текст, сгенерированный ИИ. Оценки также увеличиваются: оценки от 0.5 до 1 помечаются как AI в зависимости от контекста в общем контенте.
- Агрегация и прогнозирование: После того, как все сегменты оценены, эти оценки объединяются или агрегируются для получения прогноза того, какая часть текста может быть сгенерирована ИИ. Этот общий балл затем отображается в индикаторе обнаружения искусственного интеллекта Turnitin.
Важно помнить, что инструмент обнаружения искусственного интеллекта Turnitin обучен на различных языковых моделях, что помогает ему распознавать текст, сгенерированный несколькими различными инструментами искусственного интеллекта. Кроме того, в отличие от некоторых других средств проверки искусственного интеллекта, Turnitin предназначен для распознавания языковых характеристик, генерируемых LLM.
Например, LLM обычно создают текст, в котором с высокой вероятностью будет выбрано следующее слово в предложении, на основе шаблонов, которые ИИ-писатель усвоил из своих обучающих данных. Классификаторы детекторов искусственного интеллекта Turnitin затем обучаются улавливать эти закономерности и отличать их от написанного человеком.
Насколько точно распознавание записи ИИ Turnitin?
Одно из наиболее интересных заявлений Turnitin заключается в том, что ее модель обнаружения письма с помощью искусственного интеллекта обеспечивает точность до 98 % при идентификации текста, созданного искусственным интеллектом. Хотя существует множество академических учреждений, которые используют инструмент обнаружения искусственного интеллекта Turnitin, важно понимать, что не существует инструмента обнаружения искусственного интеллекта, который был бы на 100% надежным.
Как и любой детектор искусственного интеллекта, Turnitin по-прежнему подвержен риску ложных срабатываний. Ложные срабатывания относятся к случаям, когда детекторы ИИ неправильно классифицируют написанное человеком как контент, созданный ИИ. Конечно, это может привести к ложному обвинению студентов в использовании инструментов искусственного интеллекта для создания своих заданий.
Чтобы избежать этого ненужного усложнения использования детектора искусственного интеллекта, Turnitin подчеркивает важность снижения количества ложных срабатываний и регулярно проходит тестирование. Это означает, что иногда он может пропускать текст, сгенерированный ИИ. Тем не менее, Turnitin стремится поддерживать уровень ложных срабатываний ниже 1% для заданий, в которых более 20% написания ИИ.
Хотя Turnitin — это способ упростить процесс проверки заявок, знание того, насколько точен этот детектор искусственного интеллекта, может сделать ваш процесс оценки более точным. Для еще более точных результатов оценки вы также можете использовать AI Grader Смодина чтобы помочь вам обработать и оценить больше заявок за еще меньшее время.
Какие модели написания искусственного интеллекта обнаруживает Turnitin?
Возможности Turnitin по обнаружению записи с использованием искусственного интеллекта специально разработаны для идентификации контента, созданного различными моделями искусственного интеллекта. При первом запуске Turnitin был обучен обнаруживать такие модели, как ChatGPT-3 и ChatGPT-3.5, а также все их варианты. Это включает в себя распознавание контента, созданного языковыми моделями искусственного интеллекта, основанными на модели ChatGPT-3 или похожими на нее.
Turnitin был протестирован на совместимость с ChatGPT-4 (в частности, ChatGPT Plus) и утверждает, что в большинстве случаев способен обнаруживать тексты искусственного интеллекта, создаваемые этой моделью. Тем не менее, детектор ИИ необходимо настроить и переоценить для большей точности с помощью этого генератора ИИ.
Поскольку ИИ продолжает развиваться, компания Turnitin признала необходимость расширения своих возможностей обнаружения записи ИИ для новых или обновленных моделей ИИ. Это означает, что преподаватели должны знать о возможных ложных сообщениях, когда учащиеся используют более продвинутые или другие языковые модели искусственного интеллекта.
Если вы хотите использовать детектор искусственного интеллекта, который может точно распознавать текст, сгенерированный другими моделями, обязательно проверьте AI-контент-детектор Smodin.
Понимание результатов искусственного интеллекта Turnitin
Частью использования инструмента обнаружения ИИ Turnitin является умение интерпретировать его результаты. Процент, отображаемый в индикаторе обнаружения записи ИИ, обычно показывает, какая часть отправленного текста была создана инструментами записи ИИ.
Обычно этот процент основан на «квалификационном» тексте. Речь идет о прозаических предложениях, написанных в стандартной грамматической форме. Однако он не включает текст, который может быть записан в виде списков или маркеров. Поэтому, когда вы проверяете отправленные материалы, важно помнить, что не весь текст мог быть отсканирован — только соответствующий текст.
Еще одним важным фактором, который следует учитывать при работе со средством обнаружения ИИ, является то, что его всегда следует использовать в качестве дополнительного средства, а не как окончательный способ доказать или опровергнуть использование написания ИИ. Поскольку нет любой Детекторы искусственного интеллекта, которые имеют 100% точность, вам также придется использовать собственное суждение при анализе оценок искусственного интеллекта.
Отчет Turnitin о сходстве
Возможности обнаружения искусственного интеллекта Turnitin сделали его мощным средством проверки соответствия отправленного задания в академическом контексте правилам и положениям учебного заведения. Однако Turnitin также включает в себя встроенную программу проверки на плагиат.
По этой причине понимание разницы между оценкой AI и оценкой сходства имеет решающее значение для преподавателей. В противном случае вы можете непреднамеренно обвинить студентов в использовании текста, созданного ИИ, хотя на самом деле их задание получило более высокий балл за плагиат. не высокий показатель ИИ.
Отчет о сходстве предоставляет преподавателям подробный анализ того, насколько отправленное задание похоже на существующие источники (в базе данных Turnitin). Средство проверки плагиата, наряду со оценкой сходства (представленной в процентах), подчеркивает сходство между двумя текстами.
Часто задаваемые вопросы
Помечает ли AI-детектор письма Turnitin перефразированный контент?
В некоторых случаях материалы могут включать перефразированный контент, созданный с использованием Удаление обнаружения AI.
Детектор искусственного интеллекта Turnitin обычно может обнаружить случаи использования этих инструментов, хотя по-прежнему существует вероятность ложноположительных или отрицательных результатов в зависимости от модели написания искусственного интеллекта.
Это особенно верно, если текст содержит комбинацию контента, созданного искусственным интеллектом, и контента, написанного человеком.
Чем обнаружение письменного текста Turnitin с использованием искусственного интеллекта отличается от обнаружения плагиата?
Функции обнаружения искусственного интеллекта Turnitin и проверки на плагиат — это два разных процесса на платформе. Средство проверки на плагиат предназначено для поиска случаев, когда текст имеет сходство с другими опубликованными статьями, блогами, научными работами и общим содержанием. Это отражено в отчете о сходстве. Чем выше показатель сходства, тем больше сходств обнаружил инструмент.
С другой стороны, возможности обнаружения искусственного интеллекта Turnitin ограничены обнаружением случаев написания искусственного интеллекта, где обнаруживается, что контент генерируется языковыми моделями, такими как ChatGPT. Это представлено процентным показателем AI.
Может ли Turnitin обнаружить контент AI на языках, отличных от английского?
Детектор искусственного интеллекта Turnitin ограничивается анализом материалов на английском языке. Это означает, что учреждения, которые в основном получают эссе и статьи на английском языке, могут использовать Turnitin для анализа этих документов, но программа проверки не будет работать для материалов на других языках.
Заключение
Turnitin — фантастический инструмент для поддержания академической честности в условиях эволюции контента искусственного интеллекта. Благодаря точности инструмента, достигающего 98%, он стал неоценимым подспорьем как для преподавателей, так и для студентов, и, похоже, он совершенствуется и расширяется, чтобы идти в ногу с эволюцией инструментов письма с искусственным интеллектом.
В дополнение к функции обнаружения искусственного интеллекта он также имеет встроенную программу проверки на плагиат, создавая комплексный инструмент, который снижает потребность в нескольких инструментах. В свою очередь, это делает проверку и оценку академических документов быстрее и проще, чем когда-либо.