Turnitin és un dels models de verificador de plagi més coneguts i fiables del mercat i és àmpliament utilitzat per les institucions acadèmiques. L'abril de 2023, el sistema va evolucionar per incloure un model de detecció d'IA i va ampliar les seves funcions per mantenir-se al dia amb el món en constant canvi de la IA.
Però, com funciona aquest nou model de detecció d'IA? I pots confiar-hi? En aquesta guia, explorarem el detector d'IA de Turnitin de la A a la Z, inclòs com funciona, com interpretar els seus resultats i la precisió de l'eina.
Per tant, si esteu preparats per aprofundir en els detalls de Turnitin, comencem.
Com funciona Turnitin per a la detecció d'IA?
Turnitin té un enfocament únic per detectar contingut generat per IA. Implica una combinació d'algoritmes avançats, aprenentatge automàtic i anàlisi del llenguatge.
Aquest sistema està dissenyat per identificar fragments de text que tenen patrons coherents amb els generats per IA o grans models de llenguatge (LLM). Aquests poden incloure ChatGPT-3, ChatGPT-3.5 i models d'IA similars.
Per senzilla que pugui semblar aquesta explicació, hi ha molt més que s'inclou en aquest procés del que sembla. Hi ha una sèrie de passos que l'eina de detecció d'IA de Turnitin utilitza per marcar el contingut generat per les eines d'escriptura d'IA, amb cada pas jugant un paper crucial en el procés. Aquests passos inclouen:
- Tramitació de la presentació: Quan envieu una tasca a través de Turnitin, primer es divideix en parts més petites de text. Normalment són uns quants centenars de paraules per part per ajudar a analitzar el text en context i millorar la precisió de Turnitin.
- Puntuació del segment: A continuació, el model de detecció d'IA puntua cada segment de text en una escala de 0 a 1. Una puntuació de 0 suggereix que el text és humà i una puntuació d'1 indica que el segment és text generat per IA. Les puntuacions també van per increments, amb puntuacions de 0.5 a 1 marcades com a IA en funció del context del contingut general.
- Agregació i predicció: Un cop s'han puntuat tots els segments, aquestes puntuacions es combinen o s'agreguen per generar una predicció de quant del text és probable que es generi amb IA. A continuació, aquesta puntuació global es presenta a l'indicador de detecció d'IA de Turnitin.
És important recordar que l'eina de detecció d'IA de Turnitin està entrenada en diversos models d'idioma, cosa que l'ajuda a recollir el text generat per diverses eines d'IA diferents. A més, a diferència d'altres verificadors d'IA, Turnitin està dissenyat per reconèixer les característiques del llenguatge que generen els LLM.
Per exemple, els LLM solen produir text que té una alta probabilitat de seleccionar la paraula següent d'una frase en funció dels patrons que l'escriptor d'IA ha après a partir de les seves dades d'entrenament. Aleshores, els classificadors de detectors d'IA de Turnitin estan entrenats per detectar aquests patrons i poden diferenciar-los de l'escriptura humana.
Quina precisió és la detecció d'escriptura d'IA de Turnitin?
Una de les afirmacions més interessants que fa Turnitin és que el seu model de detecció d'escriptura d'IA té una precisió de fins a un 98% per identificar el text generat per la IA. Tot i que hi ha moltes institucions acadèmiques que utilitzen l'eina de detecció d'IA de Turnitin, és crucial entendre que no hi ha cap eina de detecció d'IA que sigui 100% infalible.
Com amb qualsevol detector d'IA, Turnitin encara està en risc de falsos positius. Els falsos positius es refereixen a casos en què els detectors d'IA classifiquen incorrectament l'escriptura humana com a contingut generat per la IA. Per descomptat, això pot provocar que els estudiants siguin acusats falsament d'utilitzar eines d'IA per generar les seves tasques.
Per evitar aquesta complicació innecessària d'utilitzar un detector d'IA, Turnitin subratlla la importància de reduir els falsos positius i se sotmet regularment a proves. Això vol dir que de tant en tant pot perdre text generat per IA. Tanmateix, Turnitin pretén mantenir la seva taxa de falsos positius per sota de l'1% per a tasques amb més del 20% d'escriptura d'IA.
Tot i que Turnitin és una manera d'agilitzar el procés de verificació de les presentacions, saber la precisió d'aquest detector d'IA pot fer que el vostre procés de qualificació sigui més precís. Per obtenir resultats de qualificació encara més precisos, també podeu utilitzar-lo Grador d'IA de Smodin per ajudar-vos a processar i qualificar més enviaments en encara menys temps.
Quins models d'escriptura d'IA detecta Turnitin?
Les capacitats de detecció d'escriptura d'IA de Turnitin estan dissenyades específicament per identificar el contingut generat per diversos models d'IA. Quan es va llançar inicialment, Turnitin va ser entrenat per detectar models com ChatGPT-3 i ChatGPT-3.5, així com totes les seves variants. Això inclou el reconeixement de contingut generat pels models de llenguatge d'IA que es basen o es troben similars al model ChatGPT-3.
Turnitin ha estat provat per la seva compatibilitat amb ChatGPT-4 (especialment ChatGPT Plus) i afirma poder detectar l'escriptura d'IA produïda pel model en la majoria dels casos. Tot i així, el detector d'IA s'ha de modificar i reavaluar per obtenir una millor precisió amb aquest generador d'IA.
A mesura que la IA continua evolucionant, Turnitin ha reconegut la necessitat d'ampliar les seves capacitats de detecció d'escriptura d'IA per a models d'IA nous o actualitzats. Això vol dir que els educadors haurien de ser conscients dels possibles informes falsos quan els estudiants utilitzen models de llenguatge d'IA més avançats o diferents.
Si voleu utilitzar un detector d'IA que pugui captar amb precisió el text generat per altres models, assegureu-vos de consultar Detector de contingut d'IA de Smodin.
Comprendre els resultats d'IA de Turnitin
Part de l'ús de l'eina de detecció d'escriptura d'IA de Turnitin és saber interpretar els seus resultats. El percentatge que es mostra a l'indicador de detecció d'escriptura d'IA normalment representa la part del text enviat que es va determinar que generaven les eines d'escriptura d'IA.
Normalment, aquest percentatge es basa en un text "qualificant". Això implica frases en prosa que s'escriuen en una forma gramatical estàndard. Tanmateix, no inclou text que es pugui escriure en forma de llistes o vinyetes. Per tant, quan comproveu els enviaments, és important recordar que no tot el text pot haver estat escanejat, sinó només el text qualificatiu.
Un altre factor important a tenir en compte quan es treballa amb una eina de detecció d'IA és que sempre s'ha d'utilitzar com a ajuda suplementària i no s'ha d'utilitzar com a forma definitiva de demostrar o refutar l'ús de l'escriptura d'IA. Com que no n'hi ha qualsevol Detectors d'IA que tenen una precisió del 100%, també haureu d'utilitzar el vostre propi judici per analitzar les puntuacions d'IA.
Informe de similitud de Turnitin
Les capacitats de detecció d'IA de Turnitin l'han convertit en una potència per comprovar que una tasca enviada en un context acadèmic segueix les normes i regulacions de la institució educativa. Tanmateix, Turnitin també inclou un verificador de plagi integrat.
Per aquest motiu, entendre la diferència entre la puntuació de l'IA i la puntuació de semblança és crucial per als educadors. En cas contrari, podeu acusar sense voler els estudiants d'utilitzar text creat amb IA quan, de fet, la seva tasca ha tornat amb una puntuació de plagi més alta. no una puntuació d'IA alta.
L'Informe de similitud ofereix als educadors una anàlisi detallada de la semblança d'una tasca enviada amb les fonts existents (dins de la base de dades de Turnitin). El verificador de plagi, juntament amb la puntuació de semblança (representada com a percentatge), destaca les similituds entre els dos textos.
Preguntes freqüents
El detector d'escriptura d'IA de Turnitin marca el contingut parafrasejat?
En alguns casos, els enviaments poden incloure contingut parafrasejat que s'ha fet amb un Eliminador de detecció d'IA.
El detector d'IA de Turnitin normalment pot detectar casos en què s'han utilitzat aquestes eines, tot i que encara hi ha la possibilitat de falsos positius o negatius segons el model d'escriptura de l'IA.
Això és especialment cert si el text conté una combinació de contingut generat per IA i contingut escrit per humans.
En què és diferent la detecció d'escriptura d'IA de Turnitin de la detecció de plagi?
El detector d'IA i les funcions del verificador de plagi de Turnitin són dos processos diferents a la plataforma. El verificador de plagi està dissenyat per buscar casos en què el text comparteix similituds amb altres articles publicats, blocs, articles acadèmics i contingut general. Això està representat a l'informe de similitud. Com més alta sigui la puntuació de semblança, més semblances ha trobat l'eina.
D'altra banda, les capacitats de detecció d'IA de Turnitin es limiten a trobar casos d'escriptura d'IA, on es troba que el contingut és generat per models de llenguatge com ChatGPT. Això està representat per una puntuació percentual d'IA.
Pot Turnitin detectar contingut d'IA en idiomes diferents de l'anglès?
El detector d'IA de Turnitin es limita a analitzar els enviaments en textos en anglès. Això vol dir que les institucions que reben principalment assaigs i treballs en anglès poden utilitzar Turnitin per analitzar aquests documents, però el verificador no funcionarà per a enviaments en altres idiomes.
Consideracions finals
Turnitin és una eina fantàstica per mantenir la integritat acadèmica enmig de l'evolució del contingut d'IA. Amb l'eina que reclama una precisió de fins al 98%, s'ha convertit en una ajuda inestimable tant per als educadors com per als estudiants i sembla que s'està millorant i ampliant per mantenir-se al dia amb les evolucions de les eines d'escriptura d'IA.
A més de la seva funció de detecció d'IA, també té un verificador de plagi integrat, creant una eina completa que redueix la necessitat de múltiples eines. Al seu torn, això fa que la comprovació i l'avaluació de documents acadèmics siguin més ràpides i fàcils que mai.