TESTING OF RESIDENTS AS A TOOL FOR ASSESSING QUALITY OF THEIR TRAINING IN THE DISCIPLINE OF PUBLIC HEALTH AND HEALTH CARE

• Vladimir G. Deriushkin
• Oxana A. Gatsura
• Irina O. Kochetkova
• Sergey V. Gatsura

Abstract

In this paper the authors discuss universal and professional competencies formed in the process of residency training, based on the legislation of the Russian Federation, which requires residents to be able and willing to understand the provisions of relevant regulatory legal documents and navigate the novelties of the legislation. Thus, the aim of this study is to assess the level of residents’ knowledge on the one hand and to identify the most common mistakes for development of targeted pedagogical interventions to prevent them on the other hand.

Material and methods. The authors analyzed results of 328 clinical residents with average age 24.1±1.9 years who were offered a computer based test containing 50 MSQs. The results of 922 testing attempts were considered. The ratio of successful to unsuccessful attempts to pass the test was 1 : 1.81.

The results of successful attempts were distributed as follows: 208 people (63.3%) completed the test within 71–80%, 102 people (31.2%) scored 81–90% and only 18 residents (5.5%) gave more than 91% correct answers. With high degree of reliability, the residents made more mistakes in questions related to main provisions of the healthcare legislation than in any of other four modules of the test (p≤0.05).

Conclusion. Thus, the study conducted suggests the expediency of additional training of future doctors in this field immediately prior to their primary accreditation taking into account dynamically changing legislative framework.

Keywords:testing; legal literacy; medical education; physician; resident

References

1.On education in the Russian Federation. Federal Law of the Russian Federation of 29.12.2012 No. 273-FZ [Electronic resource]. URL: http://www.consultant.ru/document/cons_doc_LAW_140174/ (date of access May 04, 2022) (in Russian)

2.Gatsura S.V., Gatsura O.A., Maychuk E.Yu. Self-efficacy as a necessary element of formation of competence in medical education: the opinion of a physician-teacher. Infektsionnye bolezni: novosti, mneniya, obuchenie [Infectious Diseases: News, Opinions, Training]. 2016; (3): 24–9. (in Russian)

3.Zimina E.V., Deriushkin V.G., Gatsura O.A. Legal literacy as an essential competency of a physician. Infektsionnye bolezni: novosti, mneniya, obuchenie [Infectious Diseases: News, Opinions, Training]. 2019; 8 (1): 95–100. DOI: https://doi.org/10.24411/2305-3496-2019-11012 (in Russian)

4.Gatsura O.A., Deryushkin V.G., Gatsura S.V. Starting physician on the clinical residency threshold: expectations and challenges. Meditsinskoe obrazovanie i professional’noe razvitie [Medical Education and Professional Development]. 2019; 10 (3): 64–70. DOI: https://doi.org/10.24411/2220-8453-2019-13007 (in Russian)

5.Gatsura O.A., Deriushkin V.G., Gatsura S.V. To the problem of legal literacy of practicing doctors. Zdravookhranenie Rossiyskoy Federatsii [Health Care of the Russian Federation]. 2019; 63 (3): 159–65. DOI: https://doi.org/10.18821/0044-197X-2019-63-3-159-165 (in Russian)

6.Gatsura O.A., Deriushkin V.G., Navarkin M.V. Using the information resource of regulatory legal acts for making managerial decisions (Workshop). Moscow: MGMSU im. A.I. Evdokimova, 2017: 67 p. (in Russian)

7.Guidelines, instructions – evaluation tools. Metodicheskiy tsentr akkreditatsii spetsialistov Instituta elekrtonnogo meditsinskogo obrazovaniya pri FGAOU VO PMGMU im. I.M. Sechenova Minzdrava Rossii [Electronic resource]. URL: https://fmza.ru/metod/instruktsii/mr-otsenochnye-sredstva/ (date of access May 11, 2022) (in Russian)

8.On the certification of the quality of pedagogical test materials. In: Order of the Ministry of Education of the Russian Federation 17.04.2000 No. 1122 [Electronic resource]. URL: https://docs.cntd.ru/document/901764680 (date of access May 11, 2022) (in Russian)

9.On the approval of the professional standard «Doctor-physician (district physician)». In: Order of the Ministry of Labor and Social Protection of the Russian Federation 21.03.2017 No. 293n [Electronic resource]. URL: https://base.garant.ru/71648500/ (date of access May 11, 2022). (in Russian)

10. Deriushkin V.G. Legal literacy is the basis of professional competence of a doctor. In: Materials of the XXXIX final scientific conference of young scientists of the A.I. Evdokimov Moscow State University of Medicine and Dentistry. Moscow, 2017: 316–8. (in Russian)

11. Deriushkin V.G., Gatsura O.A., Gatsura S.V. The phenomenon of patient aggression according opinion of medical practitioner. Problemy sotsial’noy gigiyeny, zdravookhraneniya i istorii meditsiny [Problems of Social Hygiene, Public Health and History of Medicine]. 2021; 29 (5): 1132–7. DOI: http://dx.doi.org/10.32687/0869-866X-2021-29-5-1132-1137 (in Russian)

12. Smirnova E.V., Volkova O.A. Citizens’ complaints about the availability and quality of medical care as a tool to evaluate the effectiveness of «a new model of a primary healthcare organization». Problemy standartizatsii v zdravookhranenii [Problems of Standardization in Health Care]. 2021; (3-4): 3-12. DOI: http://dx.doi.org/10.26347/1607-2502202103-04003-012 (in Russian)

13. Gorbachev V.I., Netesin E.S., Gorbacheva S.M., Sumin S.A., Khamidulin M.V., Utkin N.N. Analysis of criminal cases against doctors of surgical specialties on the article «Causing death by negligence due to improper performance of the person’s professional duties». Vestnik intensivnoy terapii imeni A.I. Saltanova [Bulletin of Intensive Care named after A.I. Saltanov]. 2020; (4): 134–42. DOI: http://dx.doi.org/10.21320/1818-474X-2020-4-134-142 (in Russian)

14. Mardanova G.A. Law information support for legal literacy in the healthcare service area. Zhurnal yuridicheskikh issledovaniy [Journal of Legal Studies]. 2018; (4): 55–8 [Electronic resource]. URL: https://naukaru.ru/en/nauka/article/26834/view (date of access May 20, 2022) (in Russian)

Из представленного на рисунке распределения ответов по содержательным модулям следует, что самым сложным для ординаторов клинических кафедр оказался раздел, содержащий ТЗ по основам законодательства сферы здравоохранения Российской Федерации. Здесь ординаторы с высокой степенью достоверности ошибались чаще, чем в любом из других модулей (р≤0,05).

Наиболее успешно ординаторы справлялись с ТЗ, посвященными ЭВН. Предполагаем, что такое положение дел связано с неоднократным повторением этой темы не только на IV, но и на выпускном, VI, курсе лечебного факультета.

В общей сложности респонденты выбрали 1798 неверных ответов на предложенные ТЗ, которые в дальнейшем были использованы в качестве отправной точки для последующего анализа с вычислением доли ошибочных решений по каждому содержательному модулю и выделению в каждом из них так называемой тройки антилидеров, т.е. ТЗ, на которые пришлось большинство неверных ответов.

В разделе "Общественное здоровье" у экзаменуемых наибольшие затруднения вызывали вопросы, касающиеся показателей общественного здоровья и методики их расчета (30,5% неверных ответов), идентификации и анализа факторов, определяющих здоровье и риск развития заболеваний (17,6%) и, как это ни странно, вопросов медицинской профилактики (16,7%).

На долю тройки антилидеров в модуле "Организация медицинской помощи населению" выпали более половины сделанных ошибок, казалось бы, по хорошо проработанным темам, которые ранее изучались также на ряде клинических кафедр, - здесь наибольшие проблемы у респондентов вызвали ТЗ, касающиеся контроля качества и безопасности деятельности медицинской организации (32,2%), далее следовали вопросы о порядках оказания медицинской помощи (18,6%) и стандартах медицинской помощи (14,3% неверных ответов).

Экспертиза временной нетрудоспособности, к которой респонденты ранее неоднократно обращались в процессе до- и последипломного обучения, вызвала наибольшие затруднения в вопросах выбора уровня проведения ЭВН (25,5%), ответственности за организацию ЭВН (15,8%) и определения продолжительности временной нетрудоспособности (11,5%).

Обращаясь к результатам тестирования по наиболее проблемному разделу нашей дисциплины, - основам законодательства Российской Федерации (см. рисунок) отметим, что по числу неверных ответов лидируют темы, затрагивающие содержание ПГГ (15,0%); виды, формы и условия оказания медицинской помощи (13,2%), а также ее доступность и качество (7,5%). Всего на тройку антилидеров пришлось чуть более 30% неверных ответов.

Следует отметить, что некоторые ТЗ не вызвали затруднений у испытуемых. В частности, в пятерку лидеров по наибольшему количеству верных ответов по всем модулям вошли ТЗ, касающиеся: (1) оказания высокотехнологичной медицинской помощи; (2) лиц, застрахованных в системе ОМС; (3) диспансеризации и профилактических медицинских осмотров; (4) сроков действия аккредитации; (5) правомочности страхового полиса на территории Российской Федерации.

Таким образом, проведенное тестирование учебных достижений ординаторов клинических кафедр по дисциплине "Общественное здоровье и здравоохранение" выявило следующие недостатки:

· уровень усвоенного материала по ряду ключевых тем дисциплины оказался на недопустимо низком уровне;

· самыми проблемными точками стали разделы, посвященные основам законодательства в сфере здравоохранения и организации медицинской помощи населению;

· более половины ординаторов удовлетворяются низкими баллами за тестирование, не стремясь к более высоким оценкам.

Обсуждение

Полученные в ходе исследования результаты позволили выявить проблемные для освоения клиническими ординаторами тематические модули дисциплины "Общественное здоровье и здравоохранение", причем самыми сложными для решения стали ТЗ, посвященные вопросам законодательства Российской Федерации в сфере здравоохранения.

Отметим, что знание основных нормативных правовых актов и готовность правильно применять их положения становятся в настоящее время крайне важной компетенцией не только для административно-управленческого аппарата медицинских организаций, но и для практикующего врача.

Вопросам правовой грамотности медицинских работников уделяется нарастающее внимание, что подтверждается, в частности, многочисленными публикациями не только медицинской, но и юридической направленности. В своем большинстве они имеют практическую адресность и основываются на конкретных ситуациях, возникающих при нарушении тех или иных положений законодательства. Работы отечественных исследователей наглядно показывают, что именно недостаточная сформированность правоприменительного навыка приводит к инцидентам, которые могут привести к жалобам пациентов, причинить ущерб профессиональной репутации врача и/или к судебным искам [11-14].

На этом фоне диссонансом воспринимается неоправданная уверенность практикующих врачей и студентов медицинских вузов в собственной компетентности в отношении правовых аспектов профессиональной деятельности, что еще раз подчеркивает необходимость более детального рассмотрения данных вопросов на лекционных и практических занятиях [3, 5].

Сопоставимый результат продемонстрировали и клинические ординаторы ФГБОУ ВО МГМСУ им. А.И. Евдокимова Минздрава России, участвовавшие в исследовании в феврале 2018 г. Респонденты и ранее были склонны завышать свой уровень уверенности в собственной компетентности правильно применять положения правового законодательства в профессиональной деятельности [4].

Законодательная база здравоохранения постоянно обновляется, вносятся дополнения в уже действующие документы, издаются новые и аннулируются прежние акты. На этом фоне крайне важным представляется своевременное приобретение врачом необходимых медико-правовых знаний, сопряженных с изменениями отраслевых документов. Нами неоднократно подчеркивалась целесообразность изучения актуализированных разделов законодательства на старших курсах медицинских вузов, что позволит выпускникам начать профессиональную деятельность с четко сформированными практическими компетенциями [3-5, 10].

Заключение

Таким образом, проведенные исследования показали целесообразность дополнительной подготовки будущих врачей в части формирования их медико-правовых компетенций с учетом динамично меняющейся законодательной базы непосредственно перед государственной аттестацией и первичной аккредитацией. С этой целью в программу подготовки студентов выпускного курса лечебного факультета ФГБОУ ВО МГМСУ им. А.И. Евдокимова Минздрава России по инициативе профильной кафедры в 2020 г. был введен модуль "Организация здравоохранения". В настоящее время в вузе продолжается работа по оценке эффективности ранее введенного модуля на основании тестирования ординаторов клинических кафедр по тем же содержательным модулям.

Авторы считают, что оперативное реагирование высшей медицинской школы на постоянно меняющиеся реалии практического здравоохранения послужит повышению качества всесторонней подготовки практикующего врача, включая организационные и правоприменительные компетенции.

Литература

1.Об образовании в Российской Федерации // Федеральный закон РФ от 29.12.2012 № 273-ФЗ [Электронный ресурс]. URL: http://www.consultant.ru/document/cons_doc_LAW_140174/ (дата обращения: 04.05.2022)

2.Гацура С.В., Гацура О.А., Майчук Е.Ю. Самоэффективность как необходимый элемент формирования компетенции в медицинском образовании: взгляд врача-педагога // Инфекционные болезни: новости, мнения, обучение. 2016. № 3. С. 24-29.

3.Зимина Э.В., Дерюшкин В.Г., Гацура О.А. Медико-правовая грамотность как неотъемлемая компетенция врача // Инфекционные болезни: новости, мнения, обучение. 2019. Т. 8, № 1. С. 95-100. DOI: https://doi.org/10.24411/2305-3496-2019-11012

4.Гацура О.А., Дерюшкин В.Г., Гацура С.В. Начинающий врач на пороге клинической ординатуры: ожидания и вызовы // Медицинское образование и профессиональное развитие. 2019. Т. 10, № 3. С. 64-71. DOI: https://doi.org/10.24411/2220-8453-2019-13007

5.Гацура О.А., Дерюшкин В.Г., Гацура С.В. О проблеме правовой грамотности практикующих врачей // Здравоохранение Российской Федерации. 2019. Т. 63, № 3. С. 159-165. DOI: https://doi.org/10.18821/0044-197X-2019-63-3-159-165

6.Гацура О.А., Дерюшкин В.Г., Наваркин М.В. Использование информационного ресурса нормативных правовые актов для принятия управленческих решений (Практикум). Москва : МГМСУ им. А.И. Евдокимова, 2017. 67 с.

7.Методические рекомендации, инструкции - оценочные средства. Методический центр аккредитации специалистов Института электронного медицинского образования при ФГАОУ ВО ПМГМУ им. И.М. Сеченова Минздрава России [Электронный ресурс]. URL: https://fmza.ru/metod/instruktsii/mr-otsenochnye-sredstva/ (дата обращения: 11.05.2022)

8.О сертификации качества педагогических тестовых материалов // Приказ Минобра РФ от 17.04.2000 г. № 1122 [Электронный ресурс]. URL: https://docs.cntd.ru/document/901764680 (дата обращения: 11.05.2022)

9.Об утверждении профессионального стандарта "Врач-лечебник (врач-терапевт участковый)" // Приказ Министерства труда и социальной защиты РФ от 21 марта 2017 г. № 293н [Электронный ресурс]. URL: https://base.garant.ru/71648500/ (дата обращения: 11.05.2022)

10. Дерюшкин В.Г. Правовая грамотность - основа профессиональной компетентности врач // Сборник материалов XXXIX итоговой научной конференции молодых ученых МГМСУ имени А.И. Евдокимова. Москва, 2017. С. 316-318.

11. Дерюшкин В.Г., Гацура О.А., Гацура С.В. Феномен агрессии пациента, по мнению практикующего врача // Проблемы социальной гигиены, здравоохранения и истории медицины. 2021. Т. 29, № 5. С. 1132-1137. DOI: http://dx.doi.org/10.32687/0869-866X-2021-29-5-1132-1137

12. Смирнова Е.В., Волкова О.А. Жалобы граждан на доступность и качество медицинской помощи как инструмент оценки эффективности внедрения "новой модели медицинской организации, оказывающей первичную медико-санитарную помощь взрослому населению" // Проблемы стандартизации в здравоохранении. 2021. № 3-4. С. 3-12. DOI: http://dx.doi.org/10.26347/1607-2502202103-04003-012

13. Горбачев В.И., Нетесин Е.С., Горбачева С.М., Сумин С.А., Хамидулин М.В., Уткин Н.Н. Анализ уголовных дел против врачей хирургических специальностей по статье "Причинение смерти по неосторожности вследствие ненадлежащего исполнения лицом своих профессиональных обязанностей" // Вестник интенсивной терапии имени А.И. Салтанова. 2020. № 4. С. 134-142. DOI: http://dx.doi.org/10.21320/1818-474X-2020-4-134-142

14. Марданова Г.А. Информационно-правовое обеспечение правовой грамотности в сфере здравоохранения // Журнал юридических исследований. 2018. № 4. С. 55-58 [Электронный ресурс]. URL: https://naukaru.ru/ru/nauka/article/26834/view (дата обращения: 20.05.2022)

All articles in our journal are distributed under the CC BY-NC-ND 4.0 (Creative Commons Attribution-NonCommercial-NoDerivatives 4.0 International)