Turnitin er en af de mest kendte og pålidelige plagiatchecker-modeller på markedet og er meget brugt af akademiske institutioner. I april 2023 udviklede systemet sig til at omfatte en AI-detektionsmodel og udvidede dets funktioner for at holde trit med den konstant skiftende verden af AI.
Men hvordan fungerer denne nye AI-detektionsmodel? Og kan du stole på det? I denne vejledning vil vi udforske Turnitins AI-detektor fra A til Z, herunder hvordan den virker, hvordan man fortolker dens resultater, og hvor nøjagtigt værktøjet er.
Så hvis du er klar til at dykke ned i Turnitins ins og outs, så lad os komme i gang.
Hvordan virker Turnitin til AI-detektion?
Turnitin har en unik tilgang til at detektere AI-genereret indhold. Det involverer en kombination af avancerede algoritmer, maskinlæring og sproganalyse.
Dette system er designet til at identificere tekststykker, der har mønstre, der stemmer overens med at blive genereret af AI eller Large Language Models (LLM'er). Disse kan omfatte ChatGPT-3, ChatGPT-3.5 og lignende AI-modeller.
Hvor simpel denne forklaring end kan lyde, er der meget mere, der går ind i denne proces, end man kan se. Der er en række trin, som Turnitins AI-detektionsværktøj bruger til at markere indhold genereret af AI-skriveværktøjer, hvor hvert trin spiller en afgørende rolle i processen. Disse trin omfatter:
- Indsendelsesbehandling: Når du afleverer en opgave gennem Turnitin, bliver den først delt op i mindre dele af teksten. Dette er normalt et par hundrede ord pr. portion for at hjælpe med at analysere teksten i kontekst og forbedre Turnitins nøjagtighed.
- Segmentscore: Derefter scores hvert tekstsegment af AI-detektionsmodellen på en skala fra 0 til 1. En score på 0 tyder på, at teksten er menneskelig, og en score på 1 indikerer, at segmentet er AI-genereret tekst. Scoringerne går også i trin, hvor score fra 0.5 til 1 bliver markeret som AI afhængigt af konteksten inden for det overordnede indhold.
- Aggregation og forudsigelse: Når alle segmenterne er blevet scoret, kombineres eller aggregeres disse scores for at generere en forudsigelse af, hvor meget af teksten der sandsynligvis er AI-genereret. Denne overordnede score præsenteres derefter i Turnitins AI-detektionsindikator.
Det er vigtigt at huske, at Turnitins AI-detektionsværktøj er trænet i forskellige sprogmodeller, hvilket hjælper det med at opfange tekst genereret af flere forskellige AI-værktøjer. Plus, i modsætning til nogle andre AI-brikker, er Turnitin designet til at genkende sprogegenskaber, der genereres af LLM'er.
For eksempel producerer LLM'er normalt tekst, der har stor sandsynlighed for at vælge det næste ord i en sætning baseret på mønstre, som AI-skribenten har lært fra sine træningsdata. Turnitins AI-detektorklassifikatorer trænes derefter til at opfange disse mønstre og kan adskille dem fra menneskelig skrift.
Hvor nøjagtig er Turnitins AI-skrivningsdetektion?
En af de mest interessante påstande, som Turnitin fremsætter, er, at dens AI-skrivningsdetekteringsmodel er op til 98 % nøjagtig til at identificere tekst genereret af AI. Selvom der er masser af akademiske institutioner, der bruger Turnitins AI-detektionsværktøj, er det afgørende at forstå, at der ikke er noget AI-detektionsværktøj, der er 100% idiotsikkert.
Som med enhver AI-detektor er Turnitin stadig i risiko for falske positiver. Falske positive refererer til tilfælde, hvor AI-detektorer forkert klassificerer menneskelig skrift som indhold genereret af AI. Dette kan selvfølgelig medføre, at eleverne bliver fejlagtigt anklaget for at bruge AI-værktøjer til at generere deres opgaver.
For at undgå denne unødvendige komplikation ved at bruge en AI-detektor, understreger Turnitin vigtigheden af at reducere falske positiver og gennemgår regelmæssigt test. Det betyder, at den lejlighedsvis kan gå glip af AI-genereret tekst. Turnitin sigter dog mod at holde sin falske positive rate under 1% for opgaver med over 20% af AI-skrivning.
Selvom Turnitin er en måde at strømline kontrolprocessen for afleveringer, kan det at vide, hvor nøjagtig denne AI-detektor er, gøre din bedømmelsesproces mere nøjagtig. For endnu mere præcise bedømmelsesresultater kan du også bruge Smodins AI Grader for at hjælpe dig med at behandle og bedømme flere afleveringer på endnu kortere tid.
Hvilke AI-skrivemodeller registrerer Turnitin?
Turnitins AI skrivedetekteringsfunktioner er specifikt designet til at identificere indhold genereret af forskellige AI-modeller. Da det oprindeligt blev lanceret, var Turnitin trænet til at opdage modeller som ChatGPT-3 og ChatGPT-3.5, såvel som alle deres varianter. Dette omfatter genkendelse af indhold genereret af AI-sprogmodeller, der er baseret på eller ligner ChatGPT-3-modellen.
Turnitin er blevet testet for dets kompatibilitet med ChatGPT-4 (især ChatGPT Plus) og hævder at være i stand til at detektere AI-skrivning produceret af modellen i de fleste tilfælde. Alligevel skal AI-detektoren justeres og revurderes for bedre nøjagtighed med denne AI-generator.
I takt med at AI fortsætter med at udvikle sig, har Turnitin erkendt behovet for at udvide sine AI-skrivningsdetektionsfunktioner til nye eller opdaterede AI-modeller. Det betyder, at undervisere bør være opmærksomme på potentielle falske rapporter, når elever bruger mere avancerede eller anderledes AI-sprogmodeller.
Hvis du vil bruge en AI-detektor, der nøjagtigt kan opfange tekst, der er genereret af andre modeller, så sørg for at tjekke ud Smodins AI-indholdsdetektor.
Forstå Turnitins AI-resultater
En del af at bruge Turnitins AI-skrivedetektionsværktøj er at vide, hvordan man fortolker resultaterne. Den procentdel, der vises i AI-skrivedetekteringsindikatoren, repræsenterer normalt, hvor meget af den indsendte tekst blev bestemt til at blive genereret af AI-skriveværktøjer.
Normalt er denne procentdel baseret på "kvalificerende" tekst. Dette involverer prosasætninger, der er skrevet i en standard grammatisk form. Det inkluderer dog ikke tekst, der kan være skrevet i form af lister eller punktopstillinger. Så når du tjekker indsendelser, er det vigtigt at huske, at ikke hele teksten måske er blevet scannet - kun den kvalificerende tekst.
En anden vigtig faktor at overveje, når du arbejder med et AI-detektionsværktøj, er, at det altid skal bruges som en supplerende hjælp og ikke bør bruges som en endelig måde at bevise eller modbevise brugen af AI-skrivning. Da der ikke er enhver AI-detektorer, der har 100 % nøjagtighed, skal du også bruge din egen dømmekraft til at analysere AI-resultaterne.
Turnitins lighedsrapport
Turnitins AI-detektionsfunktioner har gjort det til et kraftcenter til at kontrollere, at en afleveret opgave inden for en akademisk kontekst følger uddannelsesinstitutionens regler og forskrifter. Turnitin inkluderer dog også en integreret plagiatkontrol.
Af denne grund er det afgørende for undervisere at forstå forskellen mellem AI-scoren og Similarity-scoren. Ellers kan du utilsigtet beskylde elever for at bruge AI-skabt tekst, når deres opgave faktisk er kommet tilbage med en højere plagiatscore – ikke en høj AI-score.
Similarity Report giver undervisere en detaljeret analyse af, hvor ens en afleveret opgave er til eksisterende kilder (i Turnitins database). Plagiatkontrollen fremhæver sammen med lighedsscoren (repræsenteret i procent) lighederne mellem de to tekster.
Ofte Stillede Spørgsmål
Markerer Turnitins AI-skrivedetektor parafraseret indhold?
I nogle tilfælde kan indsendelser indeholde parafraseret indhold, der er blevet spundet ved hjælp af en AI Detection Remover.
Turnitins AI-detektor kan normalt opfange tilfælde, hvor disse værktøjer er blevet brugt, selvom der stadig er mulighed for falske positiver eller negativer afhængigt af AI-skrivemodellen.
Dette gælder især, hvis teksten indeholder en kombination af AI-genereret indhold og menneskeskrevet indhold.
Hvordan er Turnitins AI-skrivedetektion forskellig fra plagiatdetektion?
Turnitins AI-detektor og plagiatkontrolfunktioner er to adskilte processer på platformen. Plagiatkontrollen er designet til at lede efter tilfælde, hvor teksten deler ligheder med andre publicerede artikler, blogs, akademiske artikler og generelt indhold. Dette er repræsenteret i lighedsrapporten. Jo højere lighedsscore, jo flere ligheder har værktøjet fundet.
På den anden side er Turnitins AI-detektionsfunktioner begrænset til at finde forekomster af AI-skrivning, hvor indholdet viser sig at være genereret af sprogmodeller som ChatGPT. Dette er repræsenteret ved en AI-procentscore.
Kan Turnitin registrere AI-indhold på andre sprog end engelsk?
Turnitins AI-detektor er begrænset til at analysere indsendelser i engelsk-baserede tekster. Det betyder, at institutioner, der primært modtager essays og artikler på engelsk, kan bruge Turnitin til at analysere disse dokumenter, men checkeren fungerer ikke for afleveringer på andre sprog.
Afsluttende tanker
Turnitin er et fantastisk værktøj til at bevare akademisk integritet midt i udviklingen af AI-indhold. Med værktøjet, der hævder op til 98 % nøjagtighed, er det blevet en uvurderlig hjælp for både undervisere og studerende og ser ud til at blive forbedret og udvidet for at følge med udviklingen i AI-skriveværktøjer.
Ud over sin AI-detektionsfunktion har den også en integreret plagiatkontrol, der skaber et omfattende værktøj, der reducerer behovet for flere værktøjer. Til gengæld gør dette kontrol og vurdering af akademiske dokumenter hurtigere og nemmere end nogensinde.
