A Turnitin az egyik legismertebb és legmegbízhatóbb plágium-ellenőrző modell a piacon, és széles körben használják a tudományos intézményekben. 2023 áprilisában a rendszer egy mesterséges intelligencia-észlelési modellt is tartalmazott, és kibővítette annak funkcióit, hogy lépést tudjon tartani az AI folyamatosan változó világával.
De hogyan működik ez az új AI észlelési modell? És megbízhat benne? Ebben az útmutatóban megvizsgáljuk a Turnitin AI-detektorát A-tól Z-ig, beleértve a működését, az eredmények értelmezését és az eszköz pontosságát.
Tehát, ha készen áll arra, hogy elmélyüljön a Turnitin csínján-bínján, kezdjük.
Hogyan működik a Turnitin az AI észlelésében?
A Turnitin egyedülálló megközelítést alkalmaz a mesterséges intelligencia által generált tartalom észlelésére. Ez fejlett algoritmusok, gépi tanulás és nyelvi elemzés kombinációját foglalja magában.
Ezt a rendszert arra tervezték, hogy azonosítsa azokat a szövegrészeket, amelyek mintázatai összhangban vannak az AI vagy a Large Language Models (LLM) által generált mintákkal. Ide tartozhatnak a ChatGPT-3, a ChatGPT-3.5 és hasonló AI modellek.
Bármilyen egyszerűnek is hangzik ez a magyarázat, sokkal több van ebben a folyamatban, mint amilyennek látszik. A Turnitin mesterséges intelligencia-észlelő eszköze számos lépést használ az AI-íróeszközök által generált tartalom megjelölésére, és mindegyik lépés döntő szerepet játszik a folyamatban. Ezek a lépések a következőket tartalmazzák:
- Beküldés feldolgozása: Amikor a Turnitinen keresztül küld be egy feladatot, az először kisebb szövegrészekre oszlik. Ez általában néhány száz szót tesz ki adagonként, hogy segítse a szöveg kontextus szerinti elemzését és javítsa a Turnitin pontosságát.
- Szegmens pontozás: Ezután a mesterséges intelligencia-észlelési modell minden szövegszegmenst 0-tól 1-ig terjedő skálán értékel. A 0-s pontszám arra utal, hogy a szöveg emberi, az 1-es pedig azt, hogy a szegmens mesterséges intelligencia által generált szöveg. A pontszámok is növekszik, a 0.5-től 1-ig terjedő pontszámok AI-ként vannak megjelölve, a teljes tartalom kontextusától függően.
- Összesítés és előrejelzés: Az összes szegmens pontozása után ezeket a pontszámokat egyesítik vagy összesítik, hogy előrejelzést készítsenek arról, hogy a szöveg mekkora része valószínűleg mesterséges intelligencia által generált. Ezt az összpontszámot ezután a Turnitin mesterséges intelligencia észlelési mutatója mutatja.
Fontos megjegyezni, hogy a Turnitin mesterséges intelligencia-észlelő eszköze különféle nyelvi modellekre van kiképezve, ami segít a különféle mesterséges intelligencia-eszközök által generált szövegek felvételében. Ráadásul, ellentétben néhány más AI-ellenőrzővel, a Turnitint úgy tervezték, hogy felismerje az LLM-ek által generált nyelvi jellemzőket.
Például az LLM-ek általában olyan szöveget állítanak elő, amely nagy valószínűséggel választja ki a következő szót a mondatban olyan minták alapján, amelyeket az AI-író megtanult a betanítási adataiból. A Turnitin mesterséges intelligencia detektor osztályozóit ezután arra tanítják, hogy felvegyék ezeket a mintákat, és meg tudják különböztetni őket az emberi írástól.
Mennyire pontos a Turnitin mesterséges intelligencia-írás észlelése?
A Turnitin egyik legérdekesebb állítása az, hogy az AI írásészlelési modellje akár 98%-os pontossággal képes azonosítani az AI által generált szöveget. Noha rengeteg akadémiai intézmény használja a Turnitin mesterséges intelligencia-észlelő eszközét, elengedhetetlen megérteni, hogy nincs 100%-ban bolondbiztos AI-észlelőeszköz.
Mint minden mesterséges intelligencia-detektor, a Turnitin továbbra is fennáll a hamis pozitív eredmények kockázatának. A hamis pozitívumok olyan esetekre utalnak, amikor az AI-detektorok helytelenül minősítik az emberi írást mesterséges intelligencia által generált tartalomként. Természetesen ez azt eredményezheti, hogy a diákokat hamisan vádolják azzal, hogy mesterséges intelligencia eszközöket használnak feladataik generálásához.
A mesterséges intelligencia-detektor használatából eredő szükségtelen bonyodalmak elkerülése érdekében a Turnitin hangsúlyozza a hamis pozitívumok csökkentésének fontosságát, és rendszeresen teszteli. Ez azt jelenti, hogy időnként hiányozhat az AI által generált szöveg. A Turnitin azonban arra törekszik, hogy a téves pozitív arányt 1% alatt tartsa olyan feladatok esetében, amelyeknél több mint 20% mesterséges intelligencia írt.
Bár a Turnitin egy módja annak, hogy egyszerűsítse a beadványok ellenőrzési folyamatát, az AI-detektor pontosságának ismerete pontosabbá teheti az osztályozási folyamatot. A még pontosabb osztályozási eredmények érdekében használhatja azt is Smodin AI Grader hogy több beadványt dolgozhasson fel és osztályozzon még rövidebb idő alatt.
Milyen AI-írási modelleket észlel a Turnitin?
A Turnitin mesterséges intelligencia írásészlelési képességeit kifejezetten a különféle mesterségesintelligencia-modellek által generált tartalom azonosítására tervezték. Kezdetben a Turnitint arra képezték ki, hogy felismerje az olyan modelleket, mint a ChatGPT-3 és a ChatGPT-3.5, valamint ezek összes változata. Ez magában foglalja a ChatGPT-3 modellen alapuló vagy ahhoz hasonló AI nyelvi modellek által generált tartalom felismerését.
A Turnitint a ChatGPT-4-gyel (különösen a ChatGPT Plus-szal) tesztelték, és azt állítják, hogy a legtöbb esetben képes észlelni a modell által előállított mesterséges intelligencia-írást. Ennek ellenére az AI-detektort módosítani és újra kell értékelni a jobb pontosság érdekében ezzel az AI-generátorral.
Ahogy a mesterséges intelligencia folyamatosan fejlődik, a Turnitin elismerte, hogy ki kell bővíteni az AI írásészlelési képességeit az új vagy frissített AI-modellek számára. Ez azt jelenti, hogy az oktatóknak tudatában kell lenniük az esetleges hamis jelentéseknek, amikor a tanulók fejlettebb vagy eltérő mesterségesintelligencia-nyelvi modelleket használnak.
Ha olyan mesterséges intelligencia detektort szeretne használni, amely pontosan képes felvenni a más modellek által generált szöveget, akkor feltétlenül nézze meg A Smodin AI tartalomdetektora.
A Turnitin AI-eredményeinek megértése
A Turnitin mesterséges intelligencia-írásészlelő eszközének használatának része az eredmények értelmezésének ismerete. A mesterséges intelligencia írásészlelési mutatójában megjelenő százalékos arány általában azt jelzi, hogy a beküldött szöveg mekkora részét generálták az AI íróeszközök.
Általában ez a százalék a „minősítő” szövegen alapul. Ez olyan prózai mondatokat foglal magában, amelyek szabványos nyelvtani formában vannak megírva. Azonban nem tartalmaz olyan szöveget, amely listák vagy felsorolásjelek formájában írható. Tehát, amikor a beküldött anyagokat ellenőrzi, ne feledje, hogy nem minden szöveg került beolvasásra – csak a minősített szöveg.
Egy másik fontos tényező, amelyet figyelembe kell venni az MI-felderítő eszközzel végzett munka során, hogy azt mindig kiegészítő segédeszközként kell használni, és nem szabad az AI-írás használatának bizonyítására vagy cáfolatára használni. Mivel nincsenek bármilyen A 100%-os pontosságú mesterséges intelligencia-detektorok esetében a saját megítélésedre is szükséged lesz az AI-pontszámok elemzésénél.
Turnitin hasonlósági jelentése
A Turnitin mesterséges intelligencia-észlelési képességei révén hatékonyan ellenőrizhető, hogy a tudományos környezetben benyújtott feladatok megfelelnek-e az oktatási intézmény szabályainak és előírásainak. A Turnitin azonban tartalmaz egy integrált plágium-ellenőrzőt is.
Emiatt az oktatók számára kulcsfontosságú az AI-pontszám és a hasonlóság-pontszám közötti különbség megértése. Ellenkező esetben akaratlanul is megvádolhatja a diákokat mesterséges intelligencia által létrehozott szöveg használatával, miközben a feladatuk magasabb plágiumpontszámmal tért vissza – nem magas AI-pontszám.
A hasonlósági jelentés részletes elemzést nyújt az oktatóknak arról, hogy egy beadott feladat mennyire hasonlít a meglévő forrásokhoz (a Turnitin adatbázisában). A plágiumellenőrző a hasonlósági pontszám mellett (százalékban kifejezve) kiemeli a két szöveg közötti hasonlóságokat.
GYIK
A Turnitin mesterséges intelligencia-író detektora megjelöli az átfogalmazott tartalmat?
Egyes esetekben a beküldött anyagok olyan átfogalmazott tartalmat tartalmazhatnak, amelyet egy AI Detection Remover.
A Turnitin mesterséges intelligencia detektora általában képes észlelni azokat az eseteket, amikor ezeket az eszközöket használták, bár az AI írási modelltől függően továbbra is fennáll a hamis pozitív vagy negatív jelzés lehetősége.
Ez különösen igaz, ha a szöveg mesterséges intelligencia által generált tartalom és ember által írt tartalom kombinációját tartalmazza.
Miben különbözik a Turnitin mesterséges intelligencia-érzékelése a plágiumészleléstől?
A Turnitin mesterséges intelligencia-érzékelő és plágium-ellenőrző funkciói két különböző folyamat a platformon. A plágiumellenőrzőt arra tervezték, hogy megkeresse azokat az eseteket, amikor a szöveg hasonlóságot mutat más publikált cikkekkel, blogokkal, tudományos dolgozatokkal és általános tartalommal. Ez szerepel a hasonlósági jelentésben. Minél magasabb a hasonlósági pontszám, annál több hasonlóságot talált az eszköz.
Másrészt a Turnitin mesterséges intelligencia-észlelési képességei a mesterséges intelligencia írási példányainak megtalálására korlátozódnak, ahol a tartalmat a ChatGPT-hez hasonló nyelvi modellek generálják. Ezt a mesterséges intelligencia százalékos pontszáma jelenti.
A Turnitin képes felismerni az AI-tartalmat az angoltól eltérő nyelveken?
A Turnitin mesterséges intelligencia detektora az angol nyelvű szövegek elemzésére korlátozódik. Ez azt jelenti, hogy azok az intézmények, amelyek elsősorban angol nyelvű esszéket és dolgozatokat kapnak, a Turnitin segítségével elemezhetik ezeket a dokumentumokat, de az ellenőrző nem működik más nyelvű beadványok esetén.
Záró gondolatok
A Turnitin egy fantasztikus eszköz az akadémiai integritás megőrzésére az AI-tartalom fejlődése közepette. Az akár 98%-os pontosságot igénylő eszköz felbecsülhetetlen értékű segítséggé vált az oktatók és a diákok számára, és úgy tűnik, hogy folyamatosan javul és bővül, hogy lépést tartson az AI-íróeszközök fejlődésével.
A mesterséges intelligencia észlelési funkciója mellett beépített plágium-ellenőrzővel is rendelkezik, amely átfogó eszközt hoz létre, amely csökkenti a több eszköz szükségességét. Ez viszont minden eddiginél gyorsabbá és egyszerűbbé teszi a tudományos dokumentumok ellenőrzését és értékelését.
