Объективная структурированная оценка технических навыков у ординаторов хирургического профиля

Введение: Технические навыки хирургических ординаторов оцениваются недостаточно. Цель исследования — (1) сравнить надёжность трёх систем оценивания, (2) сопоставить форматы с использованием живых животных и тренажёрных моделей и (3) оценить конструктивную валидность теста операционных навыков.

Методы: Были разработаны два параллельных варианта экзамена по операционным навыкам: один с использованием живых животных, другой — симуляционных моделей. Результаты оценивали с помощью чек-листов, специфичных для каждой операции, подробных глобальных оценочных шкал и заключений о сдаче или несдаче экзамена. Оба варианта прошли 20 хирургических ординаторов.

Результаты: Скорректированные на ослабление корреляции между результатами на живых животных и тренажёрных моделях были высокими (0,69–0,72). Средняя межэкспертная надёжность по всем этапам варьировала от 0,64 до 0,72. Внутренняя согласованность была от умеренной до высокой (α: 0,61–0,74) при использовании чек-листа в формате с живыми животными, а также глобальных оценок в обоих форматах. Глобальные оценки позволяли различать уровни подготовки ординаторов в обоих форматах (тренажёрные модели: F(2,17) = 4,45, p < 0,05; живые животные: F(2,17) = 3,55, p < 0,05), тогда как чек-листы этого не обеспечивали.

Выводы: Результаты этого предварительного исследования показывают, что объективная структурированная оценка технических навыков позволяет надёжно и валидно оценивать хирургические навыки. Глобальные оценки являются более эффективным методом, чем чек-листы, специфичные для отдельных заданий. При таком формате тестирования симуляция на тренажёрных моделях даёт результаты, эквивалентные работе на живых животных.