Разработка вопросов
Как писать вопросы с вариантами, проверяющие понимание
Хороший вопрос с выбором ответа содержит ясную задачу, обоснованное правило оценки и варианты, отражающие содержательные ошибки. Сложность должна исходить из предмета, а не из расшифровки формулировки.
Сформулируйте одну законченную задачу
Напишите основу вопроса так, чтобы подготовленный участник мог представить тип ответа ещё до чтения вариантов. Уберите сведения, которые не влияют на решение. Предпочитайте прямую утвердительную формулировку; необходимое отрицание выделяйте явно. Не объединяйте два независимых утверждения в одном варианте: иначе ответ начинает проверять трактовку их сочетания, а не только знание темы.
Стройте неверные варианты на реальных ошибках
Используйте ошибки, встречающиеся на практике: неверный знак, единицу измерения, похожее понятие или шаг в неправильном порядке. Сохраняйте сходную грамматику и разумно близкую длину вариантов. Правильный ответ не должен быть единственным точным или подробным. Проверьте, не становится ли неверный вариант верным при неоговорённом, но разумном допущении.
Отделяйте сложность от правил начисления баллов
Определите, один или несколько ответов верны. При множественном выборе объясните, возможен ли балл за неполный выбор и что происходит при выборе неверного варианта. Самостоятельно проверьте несколько сочетаний ответов. Вес вопроса связывайте с требуемой работой и проверяемым умением, а не просто с вероятностью того, что многие ошибутся.
Пересмотрите вопрос после первой группы
Изучите распределение вариантов, включая пропуски. Если подготовленные участники разделились между двумя ответами, проверьте ключ и формулировку, прежде чем назвать вопрос сложным. Вариант, который никто не выбирает, замените более правдоподобной ошибкой. Сохраняйте короткую заметку о правке, чтобы последующее изменение баллов не принять за изменение в обучении. Учитывайте версию при следующем использовании.
Перед публикацией
- Основа вопроса задаёт одну задачу без лишних подсказок.
- Каждый неверный вариант отражает правдоподобную ошибку.
- Ключ и начисление баллов проверены независимо.
Вопросы и ответы
- Полезен ли вариант «всё перечисленное»?
- Он может поощрять распознавание шаблона вместо оценки каждого утверждения. Предпочитайте самостоятельные варианты, если само сочетание не является учебной целью.
- Нужно ли удалять сложный вопрос?
- Не автоматически. Сначала проверьте цель, формулировку, ключ и подготовку группы. Низкая доля верных ответов сама по себе не определяет причину.
