Графикон: Скуп података есеја оценили су професионални ученици у распону од 1-10 и упоредили их у односу на детаљне критеријуме унутар рубрике да би се утврдили њихови стварни резултати. Одступање је дефинисано варијацијом скорова од стварног скора. Графикон садржи укупни резултат (просек свих критеријума) као и сваки појединачни критеријум. Критеријуми су унапред припремљени критеријуми доступни на Смодиновом АИ грејдеру, наведени на графикону као наслови колона. Прилагођене рубрике су направљене коришћењем Смодиновог генератора прилагођених критеријума АИ Градер да би се произвели сви критеријуми наведени у Смодиновим унапред припремљеним критеријумима (исти критеријуми као и наслови колона). Укупни резултат за Смодин Премаде Рубрицс одговара људским резултатима у 73% времена са нашом напредном АИ, док прилагођене рубрике које генерише Смодин прилагођени генератор рубрика поклапају се са људским оценама у 82% времена са нашом напредном АИ. Просечно одступање од реалних резултата за све критеријуме је приказано изнад.

*Рубрике креиране коришћењем Смодинових прилагођених критеријума вештачке интелигенције подударале су се са људским резултатима у 82% времена на напредном АИ подешавању. Смодинови унапред припремљени критеријуми су одговарали људским резултатима у 73% времена. Када се АИ резултат разликовао од људских резултата, у 86% времена резултат се разликовао само за 1 поен на скали од 10 поена.

**АИ грејдер обезбеђује 100% доследност, што значи да ће исти есеј дати исти резултат сваки пут када буде оцењен. Све оцене коришћене у подацима поновљене су 3 пута и произвеле су 100% доследност у сва 3 покушаја оцењивања.