Smodin - провідний світовий розробник систем оцінювання зі штучним інтелектом, який перевірив сотні тисяч завдань. ШІ-оцінювачі поступово стають новим стандартом в освіті: Вони надають неупереджені відгуки та детальну інформацію про кожен аспект завдання, забезпечують послідовну шкалу оцінювання та полегшують навантаження на викладачів, дозволяючи їм зосередитися на навчанні. У цій статті ми розглянемо, як можна використовувати AI Grader від Smodin для оцінювання одного або цілого класу завдань.
По-перше, виберіть тип оцінки
Виберіть зі списку різні типи завдань для оцінювання. Станом на серпень доступні лише типи завдань для есе, які також можна використовувати для різних типів письмових робіт відкритого типу. У вересні ми також запропонуємо оцінювач наукових питань та оцінювач коротких відповідей. Інші типи оцінювання будуть періодично додаватися протягом 2023 року.
Додати інформацію про призначення
Виберіть інформацію, пов'язану з класом і завданням, наприклад, рівень класу, налаштування інтелекту ШІ, тип завдання та будь-яку іншу відповідну інформацію.
Які налаштування ШІ використовувати?
Хоча стандартний ШІ дає якісний зворотний зв'язок, якщо ви плануєте використовувати результати AI Grader для остаточного оцінювання успішності, вам слід скористатися розширеними налаштуваннями. Тільки наші розширені налаштування ШІ дозволяють досягти 82% точності до результатів людини, надають найякісніший зворотний зв'язок і навряд чи неправильно класифікують завдання, відхиляючись від їхньої справжньої оцінки.
Виберіть критерії оцінювання або завантажте власні
Для того, щоб стандартизувати процес оцінювання, необхідно використовувати рубрику, щоб мати об'єктивні критерії, на яких базується оцінка. Рубрикатор - це набір критеріїв, кожен з яких генерує оцінку, наприклад, "Критичне мислення", "Аналітичне мислення", "Організація", "Граматика" тощо. Обираючи критерії оцінювання, ви можете вибрати один з наших готових критеріїв, створити свій власний або завантажити ті, які ви вже використовуєте.
Вибір критеріїв
Заздалегідь встановлені критерії
Готові критерії - це критерії, які є загальноприйнятими в різних академічних дисциплінах для оцінювання студентських робіт. Вони були сформовані шляхом ретельного тестування на основі сотень тестових запусків завдань, проведених нашими експертами. Вони дають надійні та узгоджені оцінки за відповідними показниками.
Створення користувацьких критеріїв
Користувацькі критерії - це критерії, які ви вирішили використовувати для оцінювання в певному діапазоні (за замовчуванням 1-10). Користувацькі критерії можна створити за допомогою простого опису або на основі існуючої рубрики. Наприклад, вхідні дані для створення кастомного критерію "Критичне мислення" можуть бути такими: "Критичне мислення визначається тим, наскільки ефективно теми, концепції та ідеї, представлені в есе, логічно пов'язані між собою, і наскільки добре воно надає аргументи за і проти кожної з них". Це дасть нам метрику оцінювання за шкалою від 1 до 10.
Ви також можете використовувати вже існуючі рубрики. Після того, як ви надасте існуючу рубрику (для будь-якого діапазону до 10), ми візьмемо цю рубрику і модифікуємо її для використання нашою моделлю оцінювання ШІ таким чином, щоб забезпечити надійні, послідовні та об'єктивні оцінки. Хоча немає необхідності змінювати ваші рубрики, якщо ви зробите їх максимально зрозумілими, це допоможе нашому ШІ отримати найбільш достовірні результати оцінювання.
Створення рубрики
Рубрикатор - це набір критеріїв. Наприклад, ваша рубрика може бути "Есе з історії про Другу світову війну", яка включає список критеріїв, за якими ви оцінюєте есе з історії. Створюючи рубрику, додайте назву та короткий опис (лише для довідки).
Далі додайте свої критерії, завантаживши існуючу рубрику у вигляді таблиці (ми проаналізуємо файл, щоб визначити критерії), або вибравши критерії окремо. Якщо ви завантажили рубрикатор, обов'язково перевірте, чи правильно він був проаналізований, натиснувши кнопку "редагувати" для кожного критерію, щоб переглянути його деталі.
Додати завдання(-я)
Ви можете оцінити одне завдання або групу завдань. Окреме завдання буде оцінюватися в режимі реального часу, однак група завдань буде оцінюватися по черзі зі швидкістю одне завдання за 2-5 хвилин, залежно від завантаження системи. Це допомагає гарантувати, що кожне завдання буде оцінене успішно.
Завантаження студентських завдань
Завантажуючи учнівські завдання, переконайтеся, що заголовок є першим рядком файлу, а вміст (в ідеалі без посилань) - з нового рядка після заголовка. Ім'я файлу буде назвою файлу з оцінками. Рекомендується використовувати ідентифікатор студента, наприклад, "stu1083723" замість особистого імені студента.
Оцінки відгуків
Підсумкова оцінка виставляється за стандартною шкалою A-F, де A - 90-100%, B - 80-89%, C - 70-79%, D - 60-69% і F - 59% і нижче. Загальна оцінка розраховується як середнє арифметичне оцінок за критеріями або за окремими рубриками (якщо це можливо).
За бажанням ви можете відредагувати остаточні оцінки (ця функція редагування буде доступна на початку вересня), завантажити оцінку або завантажити весь набір оцінок у поданні "Масове подання".
Відмова від відповідальності: Зображення вище можуть бути застарілими, оскільки інтерфейс користувача Smodin постійно вдосконалюється.