Turnitin to jeden z najbardziej znanych i zaufanych modeli sprawdzania plagiatu na rynku, powszechnie używany przez instytucje akademickie. W kwietniu 2023 r. system ewoluował, obejmując model wykrywania sztucznej inteligencji i rozszerzył swoje funkcje, aby nadążać za stale zmieniającym się światem sztucznej inteligencji.
Ale jak działa ten nowy model wykrywania AI? I czy można temu zaufać? W tym przewodniku omówimy detektor AI firmy Turnitin od A do Z, w tym jego działanie, sposób interpretacji jego wyników i dokładność narzędzia.
Jeśli więc jesteś gotowy, aby zagłębić się w tajniki Turnitin, zaczynajmy.
Jak Turnitin działa w wykrywaniu sztucznej inteligencji?
Turnitin ma unikalne podejście do wykrywania treści generowanych przez sztuczną inteligencję. Polega na połączeniu zaawansowanych algorytmów, uczenia maszynowego i analizy języka.
System ten został zaprojektowany do identyfikowania fragmentów tekstu, które mają wzorce spójne z generowanymi przez sztuczną inteligencję lub modele wielkojęzykowe (LLM). Mogą one obejmować ChatGPT-3, ChatGPT-3.5 i podobne modele AI.
Choć to wyjaśnienie może wydawać się proste, w tym procesie bierze udział o wiele więcej, niż mogłoby się wydawać. Narzędzie do wykrywania sztucznej inteligencji firmy Turnitin wykorzystuje szereg kroków do oznaczania treści generowanych przez narzędzia do pisania AI, a każdy krok odgrywa kluczową rolę w tym procesie. Te kroki obejmują:
- Przetwarzanie zgłoszenia: Kiedy przesyłasz zadanie za pośrednictwem Turnitin, jest ono najpierw dzielone na mniejsze fragmenty tekstu. Zwykle jest to kilkaset słów na porcję, co pomaga analizować tekst w kontekście i poprawiać dokładność firmy Turnitin.
- Punktacja segmentu: Następnie każdy segment tekstu jest oceniany przez model wykrywania AI w skali od 0 do 1. Wynik 0 sugeruje, że tekst jest dziełem człowieka, a wynik 1 oznacza, że segment jest tekstem wygenerowanym przez sztuczną inteligencję. Wyniki również rosną, a wyniki od 0.5 do 1 są oznaczane jako sztuczna inteligencja, w zależności od kontekstu w ramach ogólnej treści.
- Agregacja i przewidywanie: Po ocenie wszystkich segmentów wyniki te są łączone lub agregowane w celu wygenerowania przewidywania, jaka część tekstu prawdopodobnie zostanie wygenerowana przez sztuczną inteligencję. Ten ogólny wynik jest następnie prezentowany we wskaźniku wykrywania sztucznej inteligencji firmy Turnitin.
Należy pamiętać, że narzędzie firmy Turnitin do wykrywania sztucznej inteligencji jest szkolone w oparciu o różne modele językowe, co pomaga mu wychwytywać tekst generowany przez wiele różnych narzędzi AI. Ponadto, w przeciwieństwie do innych programów sprawdzających sztuczną inteligencję, Turnitin zaprojektowano tak, aby rozpoznawał cechy językowe generowane przez LLM.
Na przykład narzędzia LLM zwykle tworzą tekst, w przypadku którego istnieje duże prawdopodobieństwo wybrania następnego słowa w zdaniu, w oparciu o wzorce, których autor AI nauczył się na podstawie danych szkoleniowych. Klasyfikatory detektorów AI firmy Turnitin są następnie szkolone pod kątem wychwytywania tych wzorców i odróżniania ich od pisma ludzkiego.
Jak dokładne jest wykrywanie zapisu AI firmy Turnitin?
Jednym z najciekawszych twierdzeń firmy Turnitin jest to, że jej model wykrywania pisma oparty na sztucznej inteligencji jest do 98% dokładny w identyfikowaniu tekstu generowanego przez sztuczną inteligencję. Chociaż wiele instytucji akademickich korzysta z narzędzia do wykrywania sztucznej inteligencji firmy Turnitin, należy pamiętać, że nie ma narzędzia do wykrywania sztucznej inteligencji, które byłoby w 100% niezawodne.
Podobnie jak w przypadku każdego detektora sztucznej inteligencji, w firmie Turnitin nadal występuje ryzyko fałszywych alarmów. Fałszywie pozytywne odnoszą się do przypadków, w których detektory AI błędnie klasyfikują ludzkie pismo jako treść generowaną przez sztuczną inteligencję. Oczywiście może to spowodować, że uczniowie zostaną fałszywie oskarżeni o używanie narzędzi AI do generowania zadań.
Aby uniknąć niepotrzebnych komplikacji związanych ze stosowaniem detektora AI, firma Turnitin podkreśla znaczenie ograniczania liczby fałszywych alarmów i regularnie poddaje się testom. Oznacza to, że czasami może brakować tekstu wygenerowanego przez sztuczną inteligencję. Celem firmy Turnitin jest jednak utrzymanie wskaźnika wyników fałszywie dodatnich poniżej 1% w przypadku zadań obejmujących ponad 20% tekstów napisanych przez sztuczną inteligencję.
Chociaż Turnitin umożliwia usprawnienie procesu weryfikacji zgłoszeń, wiedza o tym, jak dokładny jest ten detektor sztucznej inteligencji, może sprawić, że proces oceniania będzie dokładniejszy. Aby uzyskać jeszcze dokładniejsze wyniki oceniania, możesz również użyć Równiarka AI Smodina aby pomóc Ci przetwarzać i oceniać więcej zgłoszeń w jeszcze krótszym czasie.
Jakie modele pisania AI wykrywa Turnitin?
Funkcje wykrywania zapisu AI firmy Turnitin zostały specjalnie zaprojektowane do identyfikowania treści generowanych przez różne modele AI. Kiedy firma Turnitin została uruchomiona, została przeszkolona w zakresie wykrywania modeli takich jak ChatGPT-3 i ChatGPT-3.5, a także wszystkich ich wariantów. Obejmuje to rozpoznawanie treści generowanych przez modele językowe AI oparte na modelu ChatGPT-3 lub do niego podobne.
Turnitin został przetestowany pod kątem zgodności z ChatGPT-4 (w szczególności ChatGPT Plus) i twierdzi, że w większości przypadków jest w stanie wykryć zapis AI wytwarzany przez model. Mimo to detektor AI wymaga ulepszenia i ponownej oceny, aby uzyskać większą dokładność w przypadku tego generatora AI.
W miarę ciągłego rozwoju sztucznej inteligencji firma Turnitin uznała potrzebę rozszerzenia swoich możliwości wykrywania zapisu AI o nowe lub zaktualizowane modele AI. Oznacza to, że nauczyciele powinni mieć świadomość potencjalnych fałszywych raportów, gdy uczniowie korzystają z bardziej zaawansowanych lub innych modeli językowych sztucznej inteligencji.
Jeśli chcesz skorzystać z detektora AI, który potrafi dokładnie wychwycić tekst wygenerowany przez inne modele, koniecznie sprawdź Detektor zawartości AI firmy Smodin.
Zrozumienie wyników AI firmy Turnitin
Częścią korzystania z narzędzia do wykrywania pisma AI firmy Turnitin jest umiejętność interpretowania jego wyników. Wartość procentowa wyświetlana we wskaźniku wykrywania pisma AI zwykle przedstawia, jaka część przesłanego tekstu została wygenerowana przez narzędzia do pisania AI.
Zwykle odsetek ten opiera się na „kwalifikującym się” tekście. Dotyczy to zdań prozatorskich zapisanych w standardowej formie gramatycznej. Nie obejmuje jednak tekstu, który można zapisać w formie list lub wypunktowań. Dlatego podczas sprawdzania zgłoszeń należy pamiętać, że nie cały tekst mógł zostać zeskanowany – tylko kwalifikujący się tekst.
Innym ważnym czynnikiem, który należy wziąć pod uwagę podczas pracy z narzędziem do wykrywania sztucznej inteligencji, jest to, że powinno ono zawsze być używane jako dodatkowa pomoc, a nie jako ostateczny sposób udowodnienia lub obalenia stosowania pisma AI. Ponieważ ich nie ma każdy Detektory AI, które mają 100% dokładność, będziesz musiał także kierować się własnym osądem podczas analizowania wyników AI.
Raport podobieństwa firmy Turnitin
Możliwości wykrywania sztucznej inteligencji firmy Turnitin uczyniły z niej potężne narzędzie do sprawdzania, czy przesłane zadanie w kontekście akademickim jest zgodne z zasadami i przepisami instytucji edukacyjnej. Jednakże Turnitin zawiera również zintegrowane narzędzie do sprawdzania plagiatu.
Z tego powodu zrozumienie różnicy między wynikiem AI a wynikiem podobieństwa ma kluczowe znaczenie dla nauczycieli. W przeciwnym razie możesz niechcący oskarżyć uczniów o korzystanie z tekstu stworzonego przez sztuczną inteligencję, podczas gdy w rzeczywistości ich zadanie wróciło z wyższym wynikiem plagiatu – nie wysoki wynik AI.
Raport podobieństwa zapewnia nauczycielom szczegółową analizę podobieństwa przesłanego zadania do istniejących źródeł (w bazie danych Turnitin). Narzędzie do sprawdzania plagiatu wraz ze wskaźnikiem podobieństwa (wyrażonym w procentach) podkreśla podobieństwa między obydwoma tekstami.
Najczęściej zadawane pytania
Czy wykrywacz pisma AI firmy Turnitin wykrywa parafrazę treści?
W niektórych przypadkach zgłoszenia mogą zawierać sparafrazowaną treść, która została utworzona za pomocą Narzędzie do usuwania wykrywania AI.
Detektor sztucznej inteligencji firmy Turnitin może zwykle wykryć przypadki użycia tych narzędzi, chociaż nadal istnieje możliwość uzyskania fałszywie dodatnich lub ujemnych wyników, w zależności od modelu zapisu AI.
Jest to szczególnie prawdziwe, jeśli tekst zawiera kombinację treści wygenerowanych przez sztuczną inteligencję i treści pisanych przez człowieka.
Czym różni się wykrywanie pisma AI firmy Turnitin od wykrywania plagiatu?
Funkcje wykrywacza sztucznej inteligencji i sprawdzania plagiatów firmy Turnitin to dwa odrębne procesy na platformie. Narzędzie do sprawdzania plagiatu ma na celu wyszukiwanie przypadków, w których tekst ma podobieństwa z innymi opublikowanymi artykułami, blogami, artykułami akademickimi i treścią ogólną. Jest to przedstawione w raporcie podobieństwa. Im wyższy wynik podobieństwa, tym więcej podobieństw znalazło narzędzie.
Z drugiej strony możliwości wykrywania sztucznej inteligencji firmy Turnitin ograniczają się do wyszukiwania przypadków pisania przez sztuczną inteligencję, w przypadku których okazuje się, że treść jest generowana przez modele językowe, takie jak ChatGPT. Jest to reprezentowane przez wynik procentowy AI.
Czy Turnitin może wykryć treści AI w językach innych niż angielski?
Detektor sztucznej inteligencji firmy Turnitin ogranicza się do analizowania zgłoszeń w tekstach w języku angielskim. Oznacza to, że instytucje, które otrzymują głównie eseje i artykuły w języku angielskim, mogą używać Turnitin do analizowania tych dokumentów, ale moduł sprawdzania nie będzie działał w przypadku zgłoszeń w innych językach.
Final Thoughts
Turnitin to fantastyczne narzędzie pozwalające zachować uczciwość akademicką w obliczu ewolucji treści AI. Ponieważ narzędzie zapewnia dokładność do 98%, stało się nieocenioną pomocą zarówno dla nauczycieli, jak i uczniów i wydaje się być udoskonalane i rozwijane, aby nadążać za ewolucją narzędzi do pisania AI.
Oprócz funkcji wykrywania sztucznej inteligencji posiada również zintegrowane narzędzie do sprawdzania plagiatu, tworząc kompleksowe narzędzie, które zmniejsza potrzebę korzystania z wielu narzędzi. To z kolei sprawia, że sprawdzanie i ocena dokumentów akademickich jest szybsze i łatwiejsze niż kiedykolwiek.