Wykres: Zestaw danych esejów został oceniony przez profesjonalnych oceniających w zakresie od 1 do 10 i porównany ze szczegółowymi kryteriami w rubryce, aby określić ich rzeczywiste wyniki. Odchylenie zostało określone przez zmienność wyników od rzeczywistego wyniku. Wykres zawiera ocenę ogólną (średnią ze wszystkich kryteriów) oraz poszczególne kryteria. Kryteria to gotowe kryteria dostępne w AI Grader firmy Smodin, wymienione na wykresie jako nagłówki kolumn. Niestandardowe rubryki zostały utworzone przy użyciu generatora niestandardowych kryteriów AI Grader firmy Smodin w celu utworzenia każdego kryterium wymienionego we wstępnie utworzonych kryteriach Smodin (te same kryteria, co nagłówki kolumn). Ogólny wynik Smodin Premade Rubrics był zgodny z wynikami ludzkimi w 73% przypadków dzięki naszej zaawansowanej sztucznej inteligencji, podczas gdy niestandardowe rubryki wygenerowane przez niestandardowy generator rubryk Smodin odpowiadały ocenom ludzkim w 82% przypadków dzięki naszej zaawansowanej sztucznej inteligencji. Powyżej przedstawiono średnie odchylenie od rzeczywistych wyników dla wszystkich kryteriów.

*Rubryki utworzone przy użyciu niestandardowych kryteriów sztucznej inteligencji Smodina odpowiadały wynikom ludzi w 82% przypadków na zaawansowanych ustawieniach sztucznej inteligencji. Wstępnie ustalone kryteria Smodina odpowiadały wynikom ludzi w 73% przypadków. Kiedy wynik AI różnił się od wyniku ludzkiego, w 86% przypadków wynik różnił się tylko o 1 punkt w 10-punktowej skali.

**Oceniacz AI zapewnia 100% spójność, co oznacza, że ​​ten sam esej da ten sam wynik za każdym razem, gdy zostanie oceniony. Wszystkie stopnie użyte w danych powtórzono 3 razy i uzyskano 100% spójność we wszystkich 3 próbach oceny.