Turnitin є однією з найвідоміших і найнадійніших моделей перевірки плагіату на ринку та широко використовується академічними установами. У квітні 2023 року система доповнилася моделлю виявлення штучного інтелекту та розширила свої функції, щоб йти в ногу зі світом штучного інтелекту, який постійно змінюється.
Але як працює ця нова модель виявлення ШІ? І чи можна цьому довіряти? У цьому посібнику ми вивчимо детектор штучного інтелекту Turnitin від А до Я, зокрема, як він працює, як інтерпретувати його результати та наскільки точний цей інструмент.
Отже, якщо ви готові заглибитися в тонкощі Turnitin, давайте почнемо.
Як Turnitin працює для виявлення ШІ?
Turnitin має унікальний підхід до виявлення контенту, створеного ШІ. Це поєднання вдосконалених алгоритмів, машинного навчання та аналізу мови.
Ця система розроблена для ідентифікації фрагментів тексту, які мають шаблони, які відповідають шаблонам, створеним штучним інтелектом або великими мовними моделями (LLM). Це можуть бути ChatGPT-3, ChatGPT-3.5 та подібні моделі ШІ.
Яким би простим не звучало це пояснення, у цей процес входить набагато більше, ніж здається на перший погляд. Інструмент виявлення штучного інтелекту Turnitin використовує ряд кроків для позначення вмісту, створеного засобами написання штучного інтелекту, причому кожен крок відіграє вирішальну роль у процесі. Ці кроки включають:
- Обробка подання: Коли ви надсилаєте завдання через Turnitin, воно спочатку розбивається на менші частини тексту. Зазвичай це кілька сотень слів на порцію, щоб допомогти проаналізувати текст у контексті та підвищити точність Turnitin.
- Оцінка за сегментами: Потім кожен сегмент тексту оцінюється моделлю виявлення штучного інтелекту за шкалою від 0 до 1. Оцінка 0 означає, що текст написаний людиною, а оцінка 1 означає, що цей сегмент є текстом, створеним штучним інтелектом. Оцінки також збільшуються, причому оцінки від 0.5 до 1 позначаються як ШІ залежно від контексту в загальному вмісті.
- Агрегація та передбачення: Після оцінки всіх сегментів ці оцінки об’єднуються або агрегуються, щоб спрогнозувати, яка частина тексту, ймовірно, буде створена ШІ. Потім ця загальна оцінка відображається в індикаторі виявлення ШІ Turnitin.
Важливо пам’ятати, що інструмент виявлення штучного інтелекту Turnitin навчений на різних мовних моделях, що допомагає йому розпізнавати текст, створений різними інструментами штучного інтелекту. Крім того, на відміну від деяких інших засобів перевірки штучного інтелекту, Turnitin розроблено для розпізнавання мовних характеристик, створених LLM.
Наприклад, LLM зазвичай створюють текст, який має високу ймовірність вибору наступного слова в реченні на основі шаблонів, які автор штучного інтелекту вивчив із своїх навчальних даних. Потім класифікатори AI-детекторів Turnitin навчаються вловлювати ці шаблони та можуть відрізняти їх від людського письма.
Наскільки точним є виявлення запису ШІ Turnitin?
Одне з найцікавіших тверджень Turnitin полягає в тому, що його модель виявлення письма ШІ має до 98% точності в ідентифікації тексту, створеного ШІ. Хоча існує багато академічних установ, які використовують інструмент виявлення штучного інтелекту від Turnitin, важливо розуміти, що немає жодного інструменту виявлення штучного інтелекту, який був би надійним на 100%.
Як і в будь-якому іншому детекторі штучного інтелекту, Turnitin все ще ризикує отримати помилкові спрацьовування. Помилкові спрацьовування стосуються випадків, коли детектори штучного інтелекту неправильно класифікують написане людиною як вміст, створений штучним інтелектом. Звичайно, це може призвести до того, що студенти будуть помилково звинувачені у використанні інструментів ШІ для створення своїх завдань.
Щоб уникнути цього непотрібного ускладнення використання детектора ШІ, Turnitin наголошує на важливості зменшення помилкових спрацьовувань і регулярно проходить тестування. Це означає, що час від часу він може пропускати текст, створений ШІ. Проте Turnitin прагне підтримувати рівень хибних позитивних результатів нижче 1% для завдань із понад 20% написання ШІ.
Незважаючи на те, що Turnitin є способом спростити процес перевірки для подання, знання того, наскільки точний цей детектор ШІ, може зробити ваш процес оцінювання точнішим. Для ще точніших результатів оцінювання ви також можете використовувати Грейдер А.І. Смодина щоб допомогти вам обробити та оцінити більше матеріалів за ще менший час.
Які моделі запису AI виявляє Turnitin?
Можливості виявлення запису Turnitin AI спеціально розроблені для ідентифікації вмісту, створеного різними моделями AI. Коли Turnitin був запущений, його навчили виявляти такі моделі, як ChatGPT-3 і ChatGPT-3.5, а також усі їхні варіанти. Це включає в себе розпізнавання вмісту, створеного мовними моделями ШІ, які базуються на моделі ChatGPT-3 або подібні до неї.
Turnitin пройшов перевірку на сумісність із ChatGPT-4 (зокрема ChatGPT Plus) і стверджує, що в більшості випадків здатний виявляти написання AI, створене моделлю. Проте детектор штучного інтелекту потрібно налаштувати та переоцінити для кращої точності за допомогою цього генератора штучного інтелекту.
Оскільки штучний інтелект продовжує розвиватися, компанія Turnitin визнала необхідність розширити свої можливості виявлення запису ШІ для нових або оновлених моделей ШІ. Це означає, що викладачі повинні знати про можливі неправдиві повідомлення, коли учні використовують більш просунуті або інші моделі мови ШІ.
Якщо ви хочете використовувати детектор штучного інтелекту, який може точно вловлювати текст, створений іншими моделями, обов’язково перевірте ШІ-детектор вмісту Smodin.
Розуміння результатів ШІ Turnitin
Знання того, як інтерпретувати його результати, є частиною використання інструменту виявлення запису Turnitin AI. Відсоток, який відображається в індикаторі виявлення ШІ-письма, зазвичай показує, скільки надісланого тексту було визначено як згенероване інструментами ШІ-письма.
Зазвичай цей відсоток базується на «кваліфікаційному» тексті. Це прозові речення, написані в стандартній граматичній формі. Однак він не включає текст, який може бути написаний у формі списків або маркерів. Отже, коли ви перевіряєте подання, важливо пам’ятати, що не весь текст може бути відскановано – лише кваліфікаційний текст.
Інший важливий фактор, який слід враховувати під час роботи з інструментом виявлення штучного інтелекту, полягає в тому, що його слід завжди використовувати як додаткову допомогу, а не як остаточний спосіб довести чи спростувати використання тексту ШІ. Оскільки їх немає будь-який Детектори штучного інтелекту, які мають 100% точність, вам також потрібно використовувати власне судження під час аналізу балів ШІ.
Звіт Turnitin про схожість
Можливості виявлення ШІ Turnitin зробили його потужним інструментом для перевірки відповідності поданого завдання в академічному контексті правилам і нормам навчального закладу. Однак Turnitin також містить вбудовану перевірку плагіату.
З цієї причини розуміння різниці між оцінкою AI та оцінкою подібності є вирішальним для педагогів. Інакше ви можете ненавмисно звинуватити студентів у використанні тексту, створеного штучним інтелектом, тоді як насправді їхнє завдання було повернуто з вищим балом за плагіат – НЕ високий бал ШІ.
Звіт про схожість надає викладачам детальний аналіз того, наскільки подане завдання схоже на існуючі джерела (у базі даних Turnitin). Засіб перевірки плагіату разом із оцінкою подібності (у відсотках) висвітлює подібність між двома текстами.
Питання і відповіді
Чи позначає детектор запису ШІ Turnitin перефразований вміст?
У деяких випадках подання може включати перефразований вміст, створений за допомогою Засіб для видалення виявлення AI.
Детектор штучного інтелекту від Turnitin зазвичай може виявити випадки використання цих інструментів, хоча все ще існує ймовірність помилкових спрацьовувань або негативів залежно від моделі запису ШІ.
Це особливо вірно, якщо текст містить поєднання контенту, створеного штучним інтелектом, і контенту, написаного людиною.
Чим ШІ-виявлення письма Turnitin відрізняється від виявлення плагіату?
Функції ШІ-детектора та перевірки плагіату Turnitin — це два різні процеси на платформі. Засіб перевірки на плагіат призначений для виявлення випадків, коли текст має схожість з іншими опублікованими статтями, блогами, науковими роботами та загальним вмістом. Це представлено у звіті про схожість. Що вищий показник подібності, то більше подібностей знайдено інструментом.
З іншого боку, можливості виявлення штучного інтелекту Turnitin обмежені пошуком екземплярів написання штучного інтелекту, де вміст створено мовними моделями, такими як ChatGPT. Це представлено відсотковим показником ШІ.
Чи може Turnitin виявляти вміст ШІ мовами, відмінними від англійської?
Детектор штучного інтелекту від Turnitin обмежується аналізом матеріалів у текстах англійською мовою. Це означає, що заклади, які переважно отримують есе та роботи англійською мовою, можуть використовувати Turnitin для аналізу цих документів, але перевірка не працюватиме для матеріалів, поданих іншими мовами.
Заключні думки
Turnitin є фантастичним інструментом для підтримки академічної доброчесності в розпал еволюції вмісту ШІ. Інструмент із заявленою точністю до 98% став безцінним помічником як для викладачів, так і для студентів і, здається, вдосконалюється та розширюється, щоб йти в ногу з еволюцією інструментів для написання ШІ.
Окрім функції виявлення штучного інтелекту, він також має інтегровану перевірку плагіату, створюючи комплексний інструмент, який зменшує потребу у кількох інструментах. У свою чергу, це робить перевірку та оцінювання академічних документів швидшою та легшою, ніж будь-коли.
