Объективный структурированный клинический экзамен по детской ревматологии: от локальной инициативы к надежному и валидному национальному инструменту формирующего оценивания

Введение: В США работают 37 программ подготовки по детской ревматологии, и во многих из них одновременно обучаются не более трех врачей. Поэтому масштабная оценка их профессиональных навыков затруднена. Объективный структурированный клинический экзамен (ОСКЭ) — метод моделирования клинических ситуаций, позволяющий оценить работу каждого участника и тем самым косвенно судить об эффективности программы подготовки. В исследовании описаны разработка и проведение двух национальных ОСКЭ по детской ревматологии, а также методы совершенствования программы.

Методы: ОСКЭ для врачей, проходящих подготовку по детской ревматологии, проводили в 2009 и 2011 годах во время национальных съездов ревматологов. Использовали сценарии и оценочные формы, первоначально разработанные руководителем одной из программ подготовки. Семь сценариев проверяли медицинские знания, навыки физикального обследования и межличностного общения. Врачи-детские ревматологи оценивали участников по контрольным листам и сразу давали им обратную связь. Руководителям программ направляли сводные отчеты о результатах их участников. Участники оценивали экзамен и предлагали улучшения его организации и сценариев. Изменения в ОСКЭ 2011 года внесли с учетом результатов 2009 года и отзывов об организации экзамена.

Результаты: В ОСКЭ участвовали 22 врача в 2009 году и 19 — в 2011 году. Оценки за сходные сценарии в двух циклах существенно не различались. В 2009 году 85,7% участников сообщили о намерении изменить свою клиническую практику. Отзывы оценщиков за 2009 год послужили основанием для изменения шкал оценивания и исключения невалидных или ненадежных оценочных процедур. Доля отрицательных оценок отдельных станций снизилась с 60% в 2009 году до 15,4% в 2011 году. Общая оценка ценности экзамена участниками в оба года была сходной. Средние оценки были ниже среди участников, предложивших улучшить отдельные сценарии, и выше среди тех, кто рекомендовал изменения в организации экзамена.

Выводы: В экзамене 2011 года удалось улучшить программу: участники реже оставляли отрицательные отзывы о конкретных сценариях. Их общая удовлетворенность не изменилась. Дальнейшая работа над выбором сценариев, подтверждением валидности оценивания и межэкспертной надежностью позволит улучшить ОСКЭ по детской ревматологии.