Специалисты-тестологи рекомендуют перед запуском каждого серьёзного тестового задания провести его обсуждение с коллегами-экспертами, а затем организовать пилотное прохождение для группы из 30-40 реальных пользователей, представляющих будущую аудиторию обучения. Уже после проведенного анализа обратной связи, выявления слишком простых/слишком сложных заданий и внесения изменений можно включать тест в образовательное решение.
1. Для оценки качества заданий экспертами на этапе разработки теста включите "Разрешить оставлять комментарии к заданиям" в настройках теста:
2. Опубликуйте тест в нужном центре и создайте ссылку для участников:
3. Отправьте ссылку экспертам. На каждой странице появится кнопка по которой можно оставить комментарии к заданиям на данной странице:
4. Через несколько минут оценка задания экспертом, его комментарий и набранный им балл отобразятся в системе, посмотреть их можно в самом задании:
Также можно выгрузить все оценки и комментарии к заданиям теста через "Отчеты" -> "Скачать отчет" -> "Комментарии к заданиям"
5. Не забудьте отключить функцию комментирования перед запуском теста на внешнюю аудиторию.
Дополнения:
- Комментарии эксперта сохранятся в системе только если эксперт пройдет тест до конца и завершит его.
- Если на одной странице размещено несколько заданий, то комментарий и оценка продублируются во всех этих заданиях. Т.е. одна страница = 1 оценка и 1 комментарий.
- После прохождения готового теста 30-40 реальными пользователями из пилотной группы сформируйте Отчет по качеству заданий. В итоговом документе вы найдете показатели сложности и дискриминативности, количество прохождений и пропусков, а также рекомендации по корректировке задания. Даже если ваше тестовое задание уже используется длительное время – попробуйте сформировать этот отчет, возможно, он подскажет вам что еще можно улучшить.