Анализ заданий в вопросах с множественным выбором: проверка качества инструмента оценки

Введение: Анализ заданий в вопросах с множественным выбором (MCQ) — важный инструмент оценки валидности и надёжности заданий. Он помогает выявлять задания, которые необходимо доработать или исключить, что позволяет формировать качественный банк тестовых заданий.

Методы: Проведён анализ 90 вопросов с множественным выбором из трёх тестов, выполненных 150 студентами первого курса бакалавриата медицины и хирургии (MBBS) по физиологии. Оценивали индекс трудности (DIF I), индекс дискриминации (DI) и эффективность дистракторов (DE). Статистический анализ выполняли с использованием MS Excel 2010 и SPSS версии 20.0.

Результаты: Из 90 вопросов большинство — 74 (82%) — имели хороший или приемлемый уровень трудности; средний DIF I составил 55,32 ± 7,4 (среднее ± стандартное отклонение). Семь вопросов (8%) были слишком трудными, а девять (10%) — слишком лёгкими. В общей сложности 72 задания (80%) имели отличный или приемлемый DI, тогда как у 18 (20%) DI был низким; средний DI составил 0,31 ± 0,12. Выявлена статистически значимая слабая корреляция между DIF I и DI (r = 0,140; p < 0,0001). Среднее значение DE составило 32,35 ± 31,3; функциональными были 73% всех дистракторов. Надёжность заданий по альфе Кронбаха составила 0,85, а по формуле Кудера—Ричардсона 20 — 0,71, что соответствует хорошему уровню. Стандартная ошибка измерения составила 1,22.

Выводы: Проведённый анализ помог преподавателям выявить качественные и оптимальные вопросы с множественным выбором, которые можно включить в банк тестовых заданий в дальнейшем, а также задания, требующие доработки. Рекомендуется проводить анализ заданий при всех оценочных мероприятиях с использованием вопросов с множественным выбором для определения валидности и надёжности оценки.