Gráfico: um conjunto de dados de redações foi avaliado por avaliadores profissionais em uma faixa de 1 a 10 e cruzado com os critérios detalhados da rubrica para determinar suas pontuações reais. O desvio foi definido pela variação dos escores em relação ao escore real. O gráfico contém uma pontuação geral (a média de todos os critérios), bem como cada critério individual. Os critérios são os critérios predefinidos disponíveis no AI Grader da Smodin, listados no gráfico como cabeçalhos de coluna. As rubricas personalizadas foram feitas usando o gerador de critérios personalizados do AI Grader da Smodin para produzir cada critério listado nos critérios predefinidos da Smodin (os mesmos critérios dos cabeçalhos das colunas). A pontuação geral das rubricas pré-fabricadas Smodin correspondeu às pontuações humanas em 73% das vezes com nossa IA avançada, enquanto as rubricas personalizadas geradas pelo gerador de rubricas personalizadas da Smodin corresponderam às notas humanas em 82% das vezes com nossa IA avançada. O desvio médio das pontuações reais para todos os critérios é mostrado acima.

*As rubricas criadas usando os critérios personalizados de IA da Smodin corresponderam às pontuações humanas em 82% das vezes na configuração de IA avançada. Os critérios pré-fabricados de Smodin corresponderam às pontuações humanas em 73% das vezes. Quando a pontuação da IA ​​diferia das pontuações humanas, 86% das vezes a pontuação diferia apenas em 1 ponto em uma escala de 10 pontos.

**O avaliador AI oferece 100% de consistência, o que significa que a mesma redação produzirá a mesma pontuação toda vez que for avaliada. Todas as notas usadas nos dados foram repetidas 3 vezes e produziram 100% de consistência em todas as 3 tentativas de avaliação.