Graphique : Un ensemble de données d'essais a été noté par des correcteurs professionnels sur une plage de 1 à 10 et comparé aux critères détaillés de la rubrique pour déterminer leurs notes réelles. L'écart a été défini par la variation des scores par rapport au score réel. Le graphique contient un score global (la moyenne de tous les critères) ainsi que chaque critère individuel. Les critères sont les critères prédéfinis disponibles sur AI Grader de Smodin, répertoriés dans le graphique sous forme d'en-têtes de colonne. Les rubriques personnalisées ont été créées à l'aide du générateur de critères personnalisés AI Grader de Smodin pour produire chaque critère répertorié dans les critères prédéfinis de Smodin (les mêmes critères que les en-têtes de colonne). Le score global des rubriques prédéfinies de Smodin correspondait aux scores humains 73 % du temps avec notre IA avancée, tandis que les rubriques personnalisées générées par le générateur de rubriques personnalisées de Smodin correspondaient aux notes humaines 82 % du temps avec notre IA avancée. L'écart moyen par rapport aux notes réelles pour tous les critères est indiqué ci-dessus.

*Les rubriques créées à l'aide des critères personnalisés d'IA de Smodin correspondaient aux scores humains 82 % du temps sur le paramètre d'IA avancé. Les critères prédéfinis de Smodin correspondaient aux scores humains 73 % du temps. Lorsque le score de l'IA différait des scores humains, 86 % du temps, le score ne différait que de 1 point sur une échelle de 10 points.

**Le correcteur AI fournit une cohérence à 100%, ce qui signifie que le même essai produira le même score à chaque fois qu'il est noté. Toutes les notes utilisées dans les données ont été répétées 3 fois et ont produit une cohérence de 100 % sur les 3 tentatives de notation.