Turnitin е един от най-известните и надеждни модели за проверка на плагиатство на пазара и се използва широко от академични институции. През април 2023 г. системата еволюира, за да включва модел за откриване на AI и разшири функциите си, за да бъде в крак с непрекъснато променящия се свят на AI.
Но как работи този нов модел за откриване на AI? И можете ли да му се доверите? В това ръководство ще проучим AI детектора на Turnitin от А до Я, включително как работи, как да интерпретираме резултатите му и колко точен е инструментът.
Така че, ако сте готови да се задълбочите в тънкостите на Turnitin, нека започваме.
Как Turnitin работи за откриване на AI?
Turnitin има уникален подход за откриване на генерирано от AI съдържание. Той включва комбинация от усъвършенствани алгоритми, машинно обучение и езиков анализ.
Тази система е проектирана да идентифицира части от текст, които имат модели, които са в съответствие с генерирането им от AI или големи езикови модели (LLM). Те могат да включват ChatGPT-3, ChatGPT-3.5 и подобни AI модели.
Колкото и просто да звучи това обяснение, в този процес има много повече, отколкото изглежда на пръв поглед. Има поредица от стъпки, които инструментът за откриване на AI на Turnitin използва, за да маркира съдържание, генерирано от инструменти за писане на AI, като всяка стъпка играе решаваща роля в процеса. Тези стъпки включват:
- Обработка на подаването: Когато изпратите задача през Turnitin, тя първо се разделя на по-малки части от текст. Това обикновено са няколкостотин думи на порция, за да се помогне при анализирането на текста в контекст и да се подобри точността на Turnitin.
- Точкуване по сегменти: След това всеки сегмент от текст се оценява от модела за откриване на AI по скала от 0 до 1. Резултат от 0 предполага, че текстът е човешки, а резултат 1 показва, че сегментът е текст, генериран от AI. Резултатите също се увеличават, като оценките от 0.5 до 1 се маркират като AI в зависимост от контекста в цялостното съдържание.
- Агрегиране и прогнозиране: След като всички сегменти бъдат оценени, тези резултати се комбинират или обобщават, за да се генерира прогноза за това каква част от текста е вероятно да бъде генериран от AI. След това този общ резултат се представя в индикатора за откриване на AI на Turnitin.
Важно е да запомните, че инструментът за откриване на AI на Turnitin е обучен на различни езикови модели, което му помага да улавя текст, генериран от множество различни инструменти за AI. Плюс това, за разлика от някои други AI проверки, Turnitin е проектиран да разпознава езикови характеристики, които са генерирани от LLM.
Например LLMs обикновено създават текст, който има голяма вероятност да избере следващата дума в изречение въз основа на модели, които авторът на AI е научил от своите данни за обучение. След това класификаторите на AI детектори на Turnitin се обучават да улавят тези модели и могат да ги разграничат от човешко писане.
Колко точно е откриването на AI писане на Turnitin?
Едно от най-интересните твърдения, които Turnitin прави, е, че неговият модел за откриване на AI писане е до 98% точен при идентифицирането на текст, генериран от AI. Въпреки че има много академични институции, които използват инструмента за откриване на AI на Turnitin, изключително важно е да разберете, че няма инструмент за откриване на AI, който да е 100% надежден.
Както при всеки AI детектор, Turnitin все още е изложен на риск от фалшиви положителни резултати. Фалшивите положителни резултати се отнасят до случаи, в които AI детекторите неправилно класифицират човешко писане като съдържание, генерирано от AI. Разбира се, това може да накара учениците да бъдат лъжливо обвинени в използване на AI инструменти за генериране на техните задачи.
За да избегне това ненужно усложнение от използването на AI детектор, Turnitin подчертава важността на намаляването на фалшивите положителни резултати и редовно се подлага на тестване. Това означава, че понякога може да пропусне текст, генериран от AI. Turnitin обаче има за цел да поддържа процента на фалшиви положителни резултати под 1% за задания с над 20% писане с изкуствен интелект.
Въпреки че Turnitin е начин за рационализиране на процеса на проверка на заявките, знанието колко точен е този AI детектор може да направи процеса на оценяване по-точен. За още по-точни резултати от оценяването можете също да използвате AI грейдер на Smodin за да ви помогне да обработите и оцените повече заявки за още по-малко време.
Какви модели за писане на AI открива Turnitin?
Възможностите на Turnitin за откриване на AI писане са специално проектирани да идентифицират съдържание, генерирано от различни AI модели. Когато беше пуснат първоначално, Turnitin беше обучен да открива модели като ChatGPT-3 и ChatGPT-3.5, както и всичките им варианти. Това включва разпознаване на съдържание, генерирано от езикови модели на AI, които са базирани на или подобни на модела ChatGPT-3.
Turnitin е тестван за своята съвместимост с ChatGPT-4 (по-специално ChatGPT Plus) и твърди, че може да открие AI писане, създадено от модела в повечето случаи. Все пак, AI детекторът трябва да бъде променен и преоценен за по-добра точност с този AI генератор.
Тъй като AI продължава да се развива, Turnitin призна необходимостта от разширяване на възможностите си за откриване на AI писане за нови или актуализирани AI модели. Това означава, че преподавателите трябва да са наясно с потенциални фалшиви доклади, когато учениците използват по-усъвършенствани или различни езикови модели на ИИ.
Ако искате да използвате AI детектор, който може точно да улавя текст, който е генериран от други модели, тогава не забравяйте да разгледате AI детектор на съдържание на Smodin.
Разбиране на резултатите от AI на Turnitin
Част от използването на инструмента за откриване на писане на AI на Turnitin е да знаете как да интерпретирате неговите резултати. Процентът, който се показва в индикатора за откриване на AI писане, обикновено представлява каква част от изпратения текст е определен като генериран от инструменти за писане с AI.
Обикновено този процент се основава на „квалифициращ“ текст. Това включва прозаични изречения, които са написани в стандартна граматична форма. Той обаче не включва текст, който може да бъде написан под формата на списъци или точки. Така че, когато проверявате изпратените документи, е важно да запомните, че не целият текст може да е бил сканиран – само квалифициращият текст.
Друг важен фактор, който трябва да имате предвид, когато работите с инструмент за откриване на AI, е, че той винаги трябва да се използва като допълнителна помощ и не трябва да се използва като окончателен начин за доказване или опровергаване на използването на писане на AI. Тъй като няма който и да е AI детектори, които имат 100% точност, ще трябва да използвате собствената си преценка и при анализирането на резултатите от AI.
Доклад за сходство на Turnitin
Възможностите на Turnitin за откриване на AI го превърнаха в мощен център за проверка дали изпратената задача в рамките на академичен контекст следва правилата и разпоредбите на образователната институция. Turnitin обаче включва и интегрирана проверка за плагиатство.
Поради тази причина разбирането на разликата между оценката на AI и оценката за сходство е от решаващо значение за преподавателите. В противен случай можете неволно да обвините учениците, че използват текст, създаден от изкуствен интелект, когато всъщност тяхната задача се е върнала с по-висок резултат за плагиатство – не висок AI резултат.
Докладът за сходство предоставя на преподавателите подробен анализ на това доколко дадено задание е подобно на съществуващите източници (в базата данни на Turnitin). Проверката за плагиатство, наред с оценката за сходство (представена като процент), подчертава приликите между двата текста.
Въпроси и Отговори
Детекторът за писане на AI на Turnitin маркира ли парафразирано съдържание?
В някои случаи изпратените материали могат да включват перифразирано съдържание, което е завъртяно с помощта на Премахване на AI Detection.
AI детекторът на Turnitin обикновено може да засече случаи, когато тези инструменти са били използвани, въпреки че все още има възможност за фалшиви положителни или отрицателни резултати в зависимост от модела на писане на AI.
Това е особено вярно, ако текстът съдържа комбинация от генерирано от AI съдържание и съдържание, написано от хора.
Как разпознаването на писане с изкуствен интелект на Turnitin се различава от откриването на плагиатство?
AI детекторът на Turnitin и функциите за проверка на плагиатство са два различни процеса на платформата. Проверката за плагиатство е предназначена да търси случаи, в които текстът споделя прилики с други публикувани статии, блогове, академични статии и общо съдържание. Това е представено в доклада за сходство. Колкото по-висок е резултатът за сходство, толкова повече сходства е открил инструментът.
От друга страна, възможностите за откриване на AI на Turnitin са ограничени до намиране на случаи на писане с AI, където се установява, че съдържанието е генерирано от езикови модели като ChatGPT. Това е представено чрез процентен резултат на AI.
Може ли Turnitin да открие AI съдържание на езици, различни от английски?
AI детекторът на Turnitin е ограничен до анализиране на подавания в текстове на английски език. Това означава, че институциите, които основно получават есета и доклади на английски, могат да използват Turnitin, за да анализират тези документи, но проверката няма да работи за изпращания на други езици.
Заключителни мисли
Turnitin е фантастичен инструмент за поддържане на академичната почтеност в разгара на еволюцията на съдържанието на AI. С инструмента, който претендира за до 98% точност, той се превърна в безценна помощ както за преподаватели, така и за студенти и изглежда се подобрява и разширява, за да бъде в крак с еволюцията в инструментите за писане на AI.
В допълнение към функцията си за откриване на AI, той също има интегриран инструмент за проверка на плагиатство, създавайки цялостен инструмент, който намалява необходимостта от множество инструменти. На свой ред, това прави проверката и оценката на академичните документи по-бързи и по-лесни от всякога.