Результаты и обратная связь
Как читать результаты экзамена без поспешных выводов
Аналитика экзамена — повод для исследования. Низкий балл может быть связан с пробелом, неясным вопросом, временем или доступом. До принятия решения сопоставьте картину группы и детали вопросов.
Начните с того, кто действительно участвовал
Проверьте число начатых и отправленных попыток и включены ли повторные попытки. Среднее по нескольким ранним работам ещё не даёт вывода о классе. Сравнивайте одинаковую версию экзамена, правила баллов, политику попыток и окно доступности. Если что-либо изменилось, явно обозначайте это ограничение при передаче результатов коллегам или участникам.
Не ограничивайтесь одним средним
Среднее описывает группу, но может скрывать совершенно разный опыт. Изучите медиану и распределение, если они доступны. Средние двух групп бывают одинаковыми, хотя в одной баллы сосредоточены рядом с центром, а в другой образуют две отдельные полосы. Проверьте смысл проходного порога. Доля сдавших — подсчёт относительно этого порога, а не независимая мера качества вопросов.
Формулируйте гипотезы по вопросам
Низкая доля верных ответов в одном задании — причина проверить его и учебную цель. Прочитайте формулировку, подтвердите ключ, затем изучите распространённые ошибки. Несколько заданий на одно умение дают больше оснований для интерпретации, чем одиночный результат. Осторожно относитесь к короткому времени и числу переключений вкладки: сами по себе они не доказывают угадывание или нарушение.
Замкните цикл обратной связи
Выберите небольшое действие: объяснить заблуждение, разобрать решение или дать адресную тренировку. Проведите сопоставимую повторную проверку и ищите изменение нужного умения, а не только рост общей оценки. При экспорте передавайте лишь нужные получателю данные и объясняйте столбцы. Не включайте идентифицирующие сведения об участниках в публичные презентации и общие примеры.
Перед публикацией
- Число попыток и влияние повторов понятны.
- Необычные вопросы проверены по ключам.
- Анализ привёл к конкретному учебному действию.
Вопросы и ответы
- Низкое среднее означает, что экзамен слишком сложный?
- Это одно из объяснений. Прежде чем менять стандарт, проверьте охват тем, преподавание, время, доступ и качество вопросов.
- Можно ли сравнивать средние двух экзаменов?
- Только с контекстом. Разные вопросы, группы, попытки и правила оценки способны изменить среднее без изменения понимания.
