Turnitin es uno de los modelos de verificación de plagio más conocidos y confiables del mercado y es ampliamente utilizado por instituciones académicas. En abril de 2023, el sistema evolucionó para incluir un modelo de detección de IA y amplió sus funciones para mantenerse al día con el mundo en constante cambio de la IA.

Pero, ¿cómo funciona este nuevo modelo de detección de IA? ¿Y puedes confiar en ello? En esta guía, exploraremos el detector de IA de Turnitin de la A a la Z, incluido cómo funciona, cómo interpretar sus resultados y qué tan precisa es la herramienta.

Entonces, si está listo para profundizar en los entresijos de Turnitin, comencemos.

¿Cómo funciona Turnitin para la detección de IA?

Turnitin tiene un enfoque único para detectar contenido generado por IA. Implica una combinación de algoritmos avanzados, aprendizaje automático y análisis del lenguaje.

Este sistema está diseñado para identificar fragmentos de texto que tienen patrones consistentes con los generados por IA o modelos de lenguaje grande (LLM). Estos pueden incluir ChatGPT-3, ChatGPT-3.5 y modelos de IA similares.

Por más simple que parezca esta explicación, hay mucho más en juego en este proceso de lo que parece. Hay una serie de pasos que utiliza la herramienta de detección de IA de Turnitin para marcar el contenido generado por las herramientas de escritura de IA, y cada paso desempeña un papel crucial en el proceso. Estos pasos incluyen:

  • Procesamiento de envío: Cuando envía una tarea a través de Turnitin, primero se divide en porciones más pequeñas de texto. Suelen ser unos cientos de palabras por parte para ayudar a analizar el texto en contexto y mejorar la precisión de Turnitin.
  • Puntuación del segmento: Luego, el modelo de detección de IA califica cada segmento de texto en una escala de 0 a 1. Una puntuación de 0 sugiere que el texto es humano y una puntuación de 1 indica que el segmento es texto generado por IA. Las puntuaciones también van en incrementos, y las puntuaciones de 0.5 a 1 se marcan como IA según el contexto dentro del contenido general.
  • Agregación y predicción: Una vez que se han calificado todos los segmentos, estas puntuaciones se combinan o agregan para generar una predicción de qué parte del texto es probable que sea generado por IA. Esta puntuación general se presenta luego en el indicador de detección de IA de Turnitin.

Es importante recordar que la herramienta de detección de IA de Turnitin está entrenada en varios modelos de lenguaje, lo que le ayuda a detectar texto generado por múltiples herramientas de IA diferentes. Además, a diferencia de otros verificadores de inteligencia artificial, Turnitin está diseñado para reconocer las características del lenguaje generadas por los LLM.

Por ejemplo, los LLM suelen producir texto que tiene una alta probabilidad de seleccionar la siguiente palabra en una oración basándose en patrones que el escritor de IA ha aprendido a partir de sus datos de entrenamiento. Luego, los clasificadores detectores de IA de Turnitin se entrenan para detectar estos patrones y diferenciarlos de la escritura humana.

¿Qué tan precisa es la detección de escritura mediante IA de Turnitin?

Una de las afirmaciones más interesantes que hace Turnitin es que su modelo de detección de escritura con IA tiene una precisión de hasta el 98 % en la identificación del texto generado por IA. Si bien hay muchas instituciones académicas que utilizan la herramienta de detección de IA de Turnitin, es fundamental comprender que no existe ninguna herramienta de detección de IA que sea 100 % infalible.

Como ocurre con cualquier detector de IA, Turnitin todavía corre el riesgo de generar falsos positivos. Los falsos positivos se refieren a casos en los que los detectores de IA clasifican incorrectamente la escritura humana como contenido generado por IA. Por supuesto, esto puede hacer que los estudiantes sean acusados ​​falsamente de utilizar herramientas de inteligencia artificial para generar sus tareas.

Para evitar esta complicación innecesaria que supone el uso de un detector de IA, Turnitin enfatiza la importancia de reducir los falsos positivos y se somete a pruebas periódicamente. Esto significa que, en ocasiones, es posible que se pierda texto generado por IA. Sin embargo, Turnitin pretende mantener su tasa de falsos positivos por debajo del 1% para tareas con más del 20% de escritura con IA.

Aunque Turnitin es una forma de agilizar el proceso de verificación de envíos, saber qué tan preciso es este detector de IA puede hacer que su proceso de calificación sea más preciso. Para obtener resultados de calificación aún más precisos, también puede utilizar Clasificador de IA de Smodin para ayudarle a procesar y calificar más envíos en incluso menos tiempo.

¿Qué modelos de escritura de IA detecta Turnitin?

Las capacidades de detección de escritura mediante IA de Turnitin están diseñadas específicamente para identificar contenido generado por varios modelos de IA. Cuando se lanzó inicialmente, Turnitin fue capacitado para detectar modelos como ChatGPT-3 y ChatGPT-3.5, así como todas sus variantes. Esto incluye el reconocimiento de contenido generado por modelos de lenguaje de IA que se basan en el modelo ChatGPT-3 o son similares.

Se ha probado la compatibilidad de Turnitin con ChatGPT-4 (particularmente ChatGPT Plus) y afirma poder detectar la escritura de IA producida por el modelo en la mayoría de los casos. Aún así, es necesario modificar y reevaluar el detector de IA para lograr una mayor precisión con este generador de IA.

A medida que la IA continúa evolucionando, Turnitin ha reconocido la necesidad de ampliar sus capacidades de detección de escritura de IA para modelos de IA nuevos o actualizados. Esto significa que los educadores deben estar atentos a posibles informes falsos cuando los estudiantes utilizan modelos de lenguaje de IA más avanzados o diferentes.

Si desea utilizar un detector de IA que pueda detectar con precisión el texto generado por otros modelos, asegúrese de consultar Detector de contenido de IA de Smodin.

Comprender los resultados de la IA de Turnitin

Parte del uso de la herramienta de detección de escritura mediante IA de Turnitin es saber cómo interpretar sus resultados. El porcentaje que se muestra en el indicador de detección de escritura de IA generalmente representa la cantidad del texto enviado que se determinó que fue generado por herramientas de escritura de IA.

Por lo general, este porcentaje se basa en texto "calificado". Se trata de oraciones en prosa escritas en una forma gramatical estándar. Sin embargo, no incluye texto que pueda estar escrito en forma de listas o viñetas. Por lo tanto, cuando revises los envíos, es importante recordar que es posible que no se haya escaneado todo el texto, solo el texto calificado.

Otro factor importante a considerar cuando se trabaja con una herramienta de detección de IA es que siempre debe usarse como una ayuda complementaria y no como una forma definitiva de probar o refutar el uso de la escritura con IA. ya que no hay cualquier Detectores de IA que tienen un 100% de precisión, también deberá utilizar su propio criterio al analizar las puntuaciones de IA.

Informe de similitud de Turnitin

Las capacidades de detección de IA de Turnitin lo han convertido en una potencia para verificar que una tarea enviada dentro de un contexto académico sigue las reglas y regulaciones de la institución educativa. Sin embargo, Turnitin también incluye un comprobador de plagio integrado.

Por este motivo, comprender la diferencia entre la puntuación de IA y la puntuación de similitud es crucial para los educadores. De lo contrario, puede acusar involuntariamente a los estudiantes de utilizar texto creado por IA cuando, de hecho, su tarea obtuvo una puntuación de plagio más alta. no una puntuación alta de IA.

El Informe de similitud proporciona a los educadores un análisis detallado de qué tan similar es una tarea enviada a fuentes existentes (dentro de la base de datos de Turnitin). El verificador de plagio, junto con la puntuación de similitud (representada como porcentaje), resalta las similitudes entre los dos textos.

Preguntas Frecuentes

¿El detector de escritura con IA de Turnitin marca contenido parafraseado?

En algunos casos, los envíos pueden incluir contenido parafraseado que ha sido creado utilizando un Eliminador de detección de IA.

El detector de IA de Turnitin generalmente puede detectar casos en los que se han utilizado estas herramientas, aunque todavía existe la posibilidad de falsos positivos o negativos dependiendo del modelo de escritura de IA.

Esto es particularmente cierto si el texto contiene una combinación de contenido generado por IA y contenido escrito por humanos.

¿En qué se diferencia la detección de escritura mediante IA de Turnitin de la detección de plagio?

Las funciones de detector de IA y verificador de plagio de Turnitin son dos procesos distintos en la plataforma. El verificador de plagio está diseñado para buscar casos en los que el texto comparte similitudes con otros artículos publicados, blogs, artículos académicos y contenido general. Esto está representado en el informe de similitud. Cuanto mayor sea la puntuación de similitud, más similitudes habrá encontrado la herramienta.

Por otro lado, las capacidades de detección de IA de Turnitin se limitan a encontrar instancias de escritura de IA, donde se descubre que el contenido es generado por modelos de lenguaje como ChatGPT. Esto está representado por una puntuación porcentual de IA.

¿Turnitin puede detectar contenido de IA en idiomas distintos del inglés?

El detector de IA de Turnitin se limita a analizar envíos en textos en inglés. Esto significa que las instituciones que reciben principalmente ensayos y artículos en inglés pueden usar Turnitin para analizar estos documentos, pero el verificador no funcionará para envíos en otros idiomas.

Consideraciones Finales:

Turnitin es una herramienta fantástica para mantener la integridad académica en medio de la evolución del contenido de IA. Dado que la herramienta afirma tener una precisión de hasta el 98%, se ha convertido en una ayuda invaluable tanto para educadores como para estudiantes y parece estar mejorando y expandiéndose para mantenerse al día con la evolución de las herramientas de escritura de IA.

Además de su función de detección de IA, también tiene un comprobador de plagio integrado, lo que crea una herramienta integral que reduce la necesidad de múltiples herramientas. A su vez, esto hace que la verificación y evaluación de documentos académicos sea más rápida y sencilla que nunca.