Gráfico: Calificadores profesionales calificaron un conjunto de datos de ensayos en un rango de 1 a 10 y lo compararon con los criterios detallados dentro de la rúbrica para determinar sus puntajes reales. La desviación se definió por la variación de las puntuaciones con respecto a la puntuación real. El gráfico contiene una puntuación general (el promedio de todos los criterios), así como cada criterio individual. Los criterios son los criterios preestablecidos disponibles en AI Grader de Smodin, enumerados en el gráfico como encabezados de columna. Las rúbricas personalizadas se crearon utilizando el generador de criterios personalizados AI Grader de Smodin para producir cada criterio enumerado en los criterios prefabricados de Smodin (los mismos criterios que los encabezados de columna). La puntuación general de las rúbricas prefabricadas de Smodin coincidió con las puntuaciones humanas el 73 % de las veces con nuestra IA avanzada, mientras que las rúbricas personalizadas generadas por el generador de rúbricas personalizadas de Smodin coincidieron con las calificaciones humanas el 82 % de las veces con nuestra IA avanzada. La desviación promedio de las puntuaciones reales para todos los criterios se muestra arriba.

*Las rúbricas creadas con los criterios personalizados de IA de Smodin coincidieron con las puntuaciones humanas el 82 % de las veces en la configuración avanzada de IA. Los criterios prefabricados de Smodin coincidieron con las puntuaciones humanas el 73 % de las veces. Cuando la puntuación de la IA difería de las puntuaciones humanas, el 86 % de las veces la puntuación solo difería en 1 punto en una escala de 10 puntos.

**El calificador de IA proporciona una consistencia del 100 %, lo que significa que el mismo ensayo producirá la misma puntuación cada vez que se califique. Todas las calificaciones utilizadas en los datos se repitieron 3 veces y produjeron una consistencia del 100 % en los 3 intentos de calificación.