Smodin является ведущим AI Grader в мире, который оценил сотни тысяч заданий. ИИ-грейдеры постепенно становятся новым стандартом в образовании: Они предоставляют объективную обратную связь и подробную информацию о каждом аспекте задания, обеспечивают последовательную шкалу оценок и облегчают нагрузку на учителей, позволяя им сосредоточиться на преподавании. Здесь мы рассмотрим, как можно использовать ИИ-градуировщик Smodin для оценки одного или целого класса заданий.
Во-первых, выберите тип оценки
Выберите из списка различные типы заданий для оценки. С августа доступны только задания типа "эссе", которые также можно использовать для различных видов письменных работ открытого типа. В сентябре мы также предложим градацию научных вопросов и градацию коротких ответов. Другие типы оценивания будут периодически добавляться в течение 2023 года.
Добавить информацию о задании
Выберите информацию, относящуюся к классу и заданию, например уровень оценки, настройки интеллекта AI, тип задания и любую другую необходимую информацию.
Какую настройку ИИ следует использовать?
Хотя стандартный ИИ дает качественную обратную связь, если вы планируете использовать результаты работы AI Grader для получения окончательных результатов успеваемости, вам необходимо использовать расширенные настройки. Только наши расширенные настройки ИИ позволили достичь 82 % точности результатов, полученных человеком, обеспечить высочайшее качество обратной связи, а также снизить вероятность неправильной классификации заданий по сравнению с их истинной оценкой.
Выберите критерии оценки или загрузите свои собственные
Чтобы стандартизировать процесс оценивания, необходимо использовать рубрикатор - объективные критерии, на которых основывается оценка. Рубрикатор - это набор критериев, каждый из которых определяет оценку, например, "Критическое мышление", "Аналитическое мышление", "Организация", "Грамматика" и т. д. При выборе критериев оценивания вы можете выбрать один из наших готовых критериев, создать свой собственный или загрузить те, которые вы уже используете.
Выбор критериев
Предварительные критерии
Готовые критерии - это критерии, которые широко приняты во многих академических дисциплинах для оценки заданий студента. Они были разработаны в результате тщательного тестирования на основе наших человеческих оценок в сотнях тестовых заданий. Они позволяют получить надежные и последовательные оценки по соответствующим метрикам.
Создание пользовательских критериев
Пользовательские критерии - это критерии, которые вы решили использовать для оценки в определенном диапазоне (по умолчанию 1-10). Пользовательские критерии можно создать с помощью простого описания или на основе существующей рубрики. Примером входных данных для создания пользовательских критериев "Критическое мышление" может быть "Критическое мышление определяется тем, насколько эффективно логически связаны между собой темы, концепции и идеи, представленные в эссе, и насколько хорошо в нем представлены аргументы за и против каждой из них". В результате мы получим метрику оценки 1-10.
Вы также можете использовать существующие рубрики. Если вы предоставите существующую рубрику (для любого диапазона меньше 10), мы возьмем эту рубрику и изменим ее для использования нашей моделью оценивания ИИ таким образом, чтобы она обеспечивала надежные, последовательные и объективные оценки. Хотя нет необходимости вносить изменения в ваши рубрики, но если вы сделаете их как можно более понятными, это поможет нашему искусственному интеллекту выводить наиболее достоверные оценки.
Создание рубрики
Рубрикатор - это набор критериев. Например, ваша рубрика может быть "Эссе по истории о Второй мировой войне", которая включает список критериев, используемых вами для оценки эссе по истории. При создании рубрики добавьте название и краткое описание (только для справки).
Далее добавьте критерии, либо загрузив существующую рубрику в виде электронной таблицы (мы разберем файл, чтобы определить критерии), либо выбрав критерии по отдельности. Если вы загрузили рубрику, убедитесь, что она была правильно разобрана, нажав кнопку "редактировать" для каждого критерия, чтобы увидеть его детали.
Добавить задание(я)
Вы можете оценить одно задание или группу заданий. Одиночное задание будет оцениваться в режиме реального времени, однако группа заданий будет оцениваться по очереди со скоростью одно задание в 2-5 минут в зависимости от загрузки системы. Это позволяет обеспечить успешное оценивание каждого задания.
Загрузка заданий для студентов
При загрузке студенческих заданий убедитесь, что название файла находится в первой строке, а содержание (в идеале без ссылок) - на новой строке после названия. Имя файла будет именем файла с оценками. Рекомендуется использовать идентификатор студента, например, "stu1083723", а не его личное имя.
Обзорные оценки
Итоговая оценка выставляется по стандартной шкале A-F: A - 90-100%, B - 80-89%, C - 70-79%, D - 60-69%, F - 59% и ниже. Итоговая оценка рассчитывается как среднее арифметическое оценок по критериям или по конкретной рубрике (если применимо).
Вы можете редактировать итоговые оценки по своему усмотрению (эта функция редактирования появится в начале сентября), загружать оценки или загружать весь набор оценок в режиме представления Bulk.
Отказ от ответственности: Изображения выше могут быть устаревшими, так как пользовательский интерфейс Smodin постоянно совершенствуется.