AI-генератор вопросов и квизов: чек-лист качества
Проверка тестовых и открытых вопросов, созданных AI, на валидность, однозначность и диагностическую пользу.
Проверьте цель, формат, дистракторы, ответы и сложность до того, как сгенерированный текст станет оцениванием.
Двадцать вопросов за несколько секунд ещё не образуют хорошую проверочную работу. Они могут измерять не тот навык, иметь несколько допустимых ответов или повторять одну схему с разными числами.
В запросе укажите уровень, цель, разрешённый материал, тип вопроса, количество, сложность, время, язык и формат ключа. Попросите для каждого задания назвать проверяемый навык и объяснить правильный ответ.
Перед публикацией проверьте:
- вопрос требует целевой навык;
- в условии есть вся необходимая информация;
- существует один защищаемый ответ или ясные критерии открытого ответа;
- дистракторы основаны на правдоподобных ошибках;
- длина, грамматика и позиция не подсказывают ответ;
- сложность возникает из содержания, а не туманной формулировки;
- задания действительно различаются;
- ключ и объяснение правильны;
- текст не копирует защищённый источник.
Решите выборку без ключа и отдайте важную работу на вторую проверку. После использования анализируйте выбранные варианты. Дистрактор, который никто не выбирает, не диагностирует ничего; вариант, выбранный почти всеми, может указывать как на общий пробел, так и на плохо написанный вопрос.
AI ускоряет черновик. Валидность появляется после review, пилота и анализа ответов учеников.
