Экспертиза заданий в тестовой форме

Экспертиза заданий в тестовой форме

• Рассмотрение на заседании тестового Комитета (кафедра, профильный КОП)
• Повторная экспертиза по итогам апробации заданий в тестовой форме
• Дистракторный анализ по итогам
• проведения экзамена

Обратная связь по итогам 1 этапа экзамена

• Программное обеспечение -?
• Статистическая обработка -?
• Дистракторный анализ -?
• Уровень сложности
• Надежность
• Валидность

Статистические параметры уровня тестового задания

• Два основных понятия:
• Уровень сложности – степень «тяжести» задания (Р)
• Дискриминационная способность (индекс ID) – на сколько «хорош» вопрос (тестовое задание)
• 0,35 – предпочтительно
• Отрицательное значение не допустимо
• Высокое «+» значение свидетельствует об эффективности деления испытуемых.
• Является параметром критериальной валидности.
• Кто лучше ответил на вопрос?
• Сильные студенты?
• Слабые студенты?
• Все отвечают правильно?
• Никто не отвечает правильно?

Для чего делается анализ задания?

• Контроль качества: дефектные компоненты (задания, вопросы, дистракторы)
• Определение неудачных заданий:
• пересмотр, замена, удаление
• По международным стандартам, из прошлогодней базы должно остаться не более 15-20% ЛУЧШИХ заданий в тестовой форме

От разработчика тестов и эксперта требуется:

• некоторая математико-статистическая подготовка
• знание основных тестовых теорий и методов многомерного статистического анализа
• опыт правильной интерпретации тестовых результатов
• умение тактично обсуждать с авторами явные и скрытые дефекты их заданий в тестовой форме
• психологическая готовность к совместному поиску аргументов
• и…бесконечное терпение….

• Вопросы?
• Благодарю Вас за внимание!