Grafico: un set di dati di saggi è stato valutato da valutatori professionisti su un intervallo da 1 a 10 e confrontato con i criteri dettagliati all'interno della rubrica per determinare i loro punteggi reali. La deviazione è stata definita dalla variazione dei punteggi rispetto al punteggio reale. Il grafico contiene un punteggio complessivo (la media di tutti i criteri) e ogni singolo criterio. I criteri sono i criteri predefiniti disponibili su AI Grader di Smodin, elencati nel grafico come intestazioni di colonna. Le rubriche personalizzate sono state create utilizzando il generatore di criteri personalizzati AI Grader di Smodin per produrre ogni criterio elencato nei criteri predefiniti di Smodin (gli stessi criteri delle intestazioni di colonna). Il punteggio complessivo per le rubriche predefinite di Smodin corrispondeva ai punteggi umani il 73% delle volte con la nostra IA avanzata, mentre le rubriche personalizzate generate dal generatore di rubriche personalizzate di Smodin corrispondevano ai voti umani l'82% delle volte con la nostra IA avanzata. La deviazione media dai punteggi reali per tutti i criteri è mostrata sopra.

*Le rubriche create utilizzando i criteri personalizzati dell'IA di Smodin corrispondevano ai punteggi umani l'82% delle volte con l'impostazione AI avanzata. I criteri predefiniti di Smodin corrispondevano ai punteggi umani il 73% delle volte. Quando il punteggio AI differiva dai punteggi umani, l'86% delle volte il punteggio differiva solo di 1 punto su una scala di 10 punti.

**Il valutatore AI fornisce una coerenza del 100%, il che significa che lo stesso saggio produrrà lo stesso punteggio ogni volta che viene valutato. Tutti i voti utilizzati nei dati sono stati ripetuti 3 volte e hanno prodotto una coerenza del 100% in tutti e 3 i tentativi di voto.