Full Text

Введение Одной из ключевых задач отечественной системы здравоохранения является выстраивание системы бенчмаркинга субъектов Российской Федерации (РФ) на основе оценки показателей, характеризующих эффективность (результативность) и качество оказания медицинской помощи на уровне субъекта РФ, в целях обеспечения возможности формирования оперативных интегральных рейтингов субъектов РФ. Важно, что методология формирования таких рейтингов должна предусматривать как оценку эффективности (результативности) всей системы здравоохранения субъекта РФ, так и возможность формирования рейтингов субъектов РФ по отдельным профилям медицинской помощи. Бенчмаркинг в современном понимании этого термина обозначает процесс сравнения тех или иных объектов (организаций, институтов, административно-территориальных образований) с целью определения и распространения лучших практик и повышения эффективности деятельности объектов бенчмаркинга [1]. Индикаторы и показатели, используемые в процессе бенчмаркинга, должны быть сравнимы между собой, также должна быть обеспечена стандартизация их сбора в целях исключения влияния иных внешних факторов на значения индикаторов или показателей [2]. Существуют различные подходы к выстраиванию системы бенчмаркинга административно-территориальных образований на основе оценки показателей эффективности (результативности) системы здравоохранения. Так, при выстраивании системы рейтингования на основе показателей эффективности профилактики и лечения госпитальных инфекций были использованы следующие требования к показателям: воспроизводимость, валидность, простота сбора данных [3]. Также показано, что участие в бенчмаркинге может быть как добровольным, так и обязательным, а результаты при этом могут предоставляться только для внутреннего использования или же быть доступными широкой публике [4]. Эти факторы являются крайне важными и определяют степень влияния рейтингов на повышение эффективности и качества медицинской помощи. Установлено, что наиболее успешно бенчмаркинг применяется при построении рейтингов медицинских организаций по различным показателям. Проведен контролируемый эксперимент [5, 6], в ходе которого было показано значение репутационных рисков для руководителей в сфере здравоохранения. Авторами был сделан вывод о необходимости регулярной публикации рейтингов в публичном доступе (открытое рейтингование) [5, 6]. Аналогичные результаты были получены в исследовании, в ходе которого разработана система бенчмаркинга административно-территориальных образований, основанная на рейтинговании и публичном освещении его результатов с последующей системой вознаграждения или санкций для руководителей в сфере здравоохранения [7, 8]. Примером менее эффективной системы бенчмаркинга является система, применяющаяся на национальном уровне в развивающихся странах в сфере охраны материнского и детского здоровья [9], которая включает в себя 20 крайне разнородных индикаторов, связанных со снижением детской смертности. В России подобная работа проводится национальными медицинскими исследовательскими центрами (НМИЦ). Одной из целей создания сети НМИЦ является необходимость оценки эффективности организации оказания медицинской помощи по профилю в субъектах РФ. Инструментом для реализации этих задач является интегральный рейтинг субъектов РФ, построенный на основе оценки показателей, отражающих состояние оказания медицинской помощи по соответствующим профилям в субъектах РФ и состояние здоровье населения. Для построения интегрального рейтинга необходимо определение методических подходов к одновременному учету значений нескольких разнородных показателей с помощью балльной системы оценки. В связи с этим задача нашего исследования заключалась в определении подходов к формированию рейтинга субъектов РФ, отражающего состояние оказания медицинской помощи по различным профилям (эффективность и качество оказания медицинской помощи по различным профилям). Исследование включало в себя следующие этапы: •комплексный анализ структуры и содержания отчетов по результатам выездных мероприятий НМИЦ; •сводный анализ используемых методических подходов к формированию рейтинга субъектов РФ; •оценка преимуществ и недостатков используемых вариантов методики формирования рейтинга субъектов РФ; •формулировка требований к выстраиванию системы рейтингования субъектов РФ на основе полученных результатов. Материалы и методы В исследовании использованы аналитические отчеты по результатам выездных мероприятий НМИЦ в субъекты РФ за 2020 и 2021 гг., а также годовые публичные отчеты НМИЦ за 2020 и 2021 гг. При проведении комплексного анализа структуры и содержания отчетов по результатам выездных мероприятий НМИЦ производился отбор показателей, используемых НМИЦ при оценке эффективности и качества оказания медицинской помощи по профилю в субъектах РФ. При этом были применены методы сводного анализа, классификации и группировки. Сводный анализ используемых методических подходов к формированию рейтинга субъектов РФ по различным профилям (направлениям деятельности) осуществлялся на основании годовых публичных отчетов НМИЦ с использованием метода декомпозиции. Методики формирования рейтингов извлекались в структурированном формате и далее разделялись на отдельные этапы вплоть до получения интегрального рейтинга субъектов РФ. Оценка преимуществ и недостатков используемых методик формирования рейтинга субъектов РФ проводилась с использованием метода выборочного SWOT-анализа, результаты которого для наглядности представляли в виде таблицы. Далее на основании полученных результатов были сформулированы основные требования к выстраиванию системы рейтингования субъектов РФ на основе показателей эффективности (результативности) и качества оказания медицинской помощи. Результаты исследования Результаты сводного анализа и группировки показателей, используемых для оценки эффективности и качества оказания медицинской помощи в субъектах РФ По результатам сводного анализа выделены следующие группы показателей: -состояния здоровья населения; -кадрового обеспечения системы здравоохранения субъекта РФ; -коечного фонда; -обеспеченности оборудованием и медицинскими изделиями; -характеризующие доступность медицинской помощи и эффективность маршрутизации пациентов; -характеризующие эффективность оказания первичной медико-санитарной помощи; -характеризующие эффективность оказания специализированной медицинской помощи; -характеризующие качество оказания медицинской помощи (на основе критериев оценки качества медицинской помощи). Установлено, что в подавляющем большинстве случаев для построения рейтинга субъектов РФ НМИЦ используют показатели состояния здоровья населения: динамику смертности от инфаркта миокарда, одногодичную летальность больных со злокачественными новообразованиями (умерли в течение первого года с момента установления диагноза из числа больных, впервые взятых на учет в предыдущем году), детскую смертность (детей в возрасте 0-4 лет) на 1 тыс. родившихся живыми и др. На втором месте по частоте использования для построения рейтингов субъектов РФ находятся показатели кадрового обеспечения системы здравоохранения субъекта РФ для оказания медицинской помощи: обеспеченность субъекта РФ квалифицированными специалистами, обеспеченность врачами-онкологами на 10 тыс. населения, наличие квалификационных категорий у врачей, укомплектованность «якорной» медицинской организации специалистами, принимающими участие в оказании медицинской помощи по медицинской реабилитации, и др. На третьем месте по частоте использования для построения рейтингов субъектов РФ находятся показатели коечного фонда: обеспеченность кардиохирургическими койками, нагрузка на реабилитационные койки в медицинских организациях, подведомственных органу управления здравоохранением субъекта РФ, за отчетный год, количество геронтологических коек в субъекте РФ и др. На четвертом месте по частоте использования находятся показатели обеспеченности оборудованием и медицинскими изделиями: обеспеченность онкологической службы оборудованием для проведения радиотерапии, оснащение медицинских организаций второго этапа медицинской реабилитации медицинским оборудованием с биологической обратной связью и другими роботизированными аппаратами, наличие современного медицинского силового оборудования для проведения ортопедических операций и др. На пятом месте по частоте использования находятся показатели, характеризующие доступность медицинской помощи и эффективность маршрутизации пациентов: доля профильных госпитализаций пациентов с острыми нарушениями мозгового кровообращения, доставленных автомобилями скорой медицинской помощи; доля пациентов с острым коронарным синдромом с подъемом сегмента ST, госпитализированных в первые 12 ч от начала заболевания, наличие эффективного взаимодействия между онкологической службой и врачами первичного звена и др. Также в ходе исследования установлено, что для построения рейтингов субъектов РФ НМИЦ используют показатели, характеризующие эффективность оказания первичной медико-санитарной помощи: долю пациентов, состоящих на диспансерном учете, среднее число посещений врачей-офтальмологов, работающих в подразделениях, оказывающих медицинскую помощь в амбулаторных условиях, на одного жителя субъекта РФ, выявляемость хронических неинфекционных заболеваний при диспансеризации (ФГБУ «НМИЦ терапии и профилактической медицины»). Используются также показатели, характеризующие эффективность оказания специализированной медицинской помощи: отношение числа выполненных чрескожных коронарных вмешательств при остром коронарном синдроме к числу выбывших пациентов, количество эндоскопических гемостазов при желудочно-кишечных кровотечениях (на 100 тыс. взрослого населения), число трансплантаций органов на 1 млн населения. Используются показатели, характеризующие качество оказания медицинской помощи (на основе критериев оценки качества медицинской помощи): соответствие плана лечения клиническим рекомендациям, проведение периоперационной профилактики инфекционных осложнений, качество оформления первичной медицинской документации. В целом по результатам анализа публичных отчетов НМИЦ и представленных в них методик построения рейтингов субъектов РФ установлены крайняя разнородность используемых показателей, отсутствие единой их классификации, отсутствие валидации расчета многих показателей и сложность сбора первичных данных для большинства используемых показателей. Результаты сводного анализа используемых национальными исследовательскими центрами вариантов методики формирования интегрального рейтинга субъектов РФ на основании показателей эффективности и качества оказания медицинской помощи в субъектах РФ По результатам исследования были выделены три основных варианта методики формирования интегральных рейтингов субъектов РФ. Установлено, что первый вариант методики представляет собой количественную балльную рейтинговую оценку количественных показателей без весовых коэффициентов. Для формирования рейтинга в соответствии с этим подходом используются преимущественно показатели состояния здоровья населения и показатели, влияющие на ожидаемую продолжительность жизни. Методика построения рейтинга включает в себя четыре последовательных этапа. Первый этап - отбор количественных показателей для рейтинга. Второй этап - построение упорядоченного ряда субъектов РФ по убыванию или возрастанию значений оцениваемого показателя. Если положительной динамикой для показателя считается снижение его значений, то на первое место упорядоченного ряда ставится показатель с наименьшим значением. Если положительной динамикой для показателя считается повышение его значений, то на первое место упорядоченного ряда ставится показатель с наибольшим значением. Третий этап - присвоение субъекту РФ числа баллов в соответствии с местом в упорядоченном ряду по следующему принципу: число курируемых субъектов минус порядковый номер субъекта РФ в упорядоченном ряду. Например, НМИЦ курирует 85 субъектов РФ и анализируемый субъект занял десятое место по показателю смертности от какой-либо группы заболеваний, следовательно, балльная оценка субъекта по этому показателю составляет 85-10=75 баллов. Четвертый этап - суммирование числа баллов, полученных субъектом РФ по результатам оценки всех показателей, включенных в интегральный рейтинг субъектов РФ. Установлено, что второй вариант методики представляет собой качественную рейтинговую оценку эффективности оказания медицинской помощи по профилю без весовых коэффициентов. Для формирования рейтинга в соответствии с этим подходом используются преимущественно качественные показатели, влияющие на качество жизни пациентов. Методика построения рейтинга включает в себя два последовательных этапа. Первый этап - отбор качественных показателей и присвоение балльной оценки. Например: •да - 1 балл; нет - 0 баллов; •в установленный срок - 2 балла; с задержкой в пределах отчетного периода - 1 балл; •полностью укомплектовано - 2 балла; частично укомплектовано - 1 балл; не укомплектовано - 0 баллов; •полное (более 90% требуемой информации) предоставление - 2 балла; частичное (более 70-90% требуемой информации) предоставление - 1 балл; неполное (менее 70% требуемой информации) предоставление - 0 баллов. Второй этап - суммирование полученных балльных оценок и формирование рейтинга субъектов РФ. Установлено, что третий вариант методики представляет собой смешанную балльно-рейтинговую оценку количественных и качественных показателей с использованием весовых коэффициентов, определенных только экспертным методом. Для формирования рейтинга в соответствии с этим подходом используются преимущественно ресурсные показатели. Методика построения рейтинга включает в себя четыре последовательных этапа. Первый этап - отбор количественных и качественных показателей для рейтинга. Второй этап - экспертная оценка количественных и качественных показателей, которые в свою очередь объединены в несколько блоков. Каждому показателю внутри блока отдельно для каждого субъекта присваивается балльная оценка путем сравнения значения показателя с эталонным значением, определяемым экспертным методом. Третий этап - по каждому блоку показателей производится расчет среднего балла, а полученные средние значения по каждому блоку пересчитываются в итоговый интегральный рейтинг по следующим формулам в зависимости от числа показателей в блоке (частное от произведения показателей на сумму попарного произведения всех показателей): -для двух блоков показателей: ps202205.4htm00001.jpg; -для трех блоков показателей: ps202205.4htm00003.jpg. Четвертый этап - построение итогового интегрального рейтинга субъектов РФ. Результаты выборочного SWOT-анализа методик формирования рейтинга субъектов РФ на основании показателей эффективности и качества оказания медицинской помощи в субъектах РФ ps202205.4htm00005.jpg На основании опыта применения первой и второй методик рейтингования субъектов РФ, описанных выше, двумя НМИЦ были опубликованы статьи в рецензируемых журналах. На основе представленной в данных публикациях информации был произведен SWOT-анализ данных методик рейтингования субъектов РФ. Опыт применения третьего варианта методики рейтингования субъектов РФ не был опубликован в рецензируемых изданиях, в связи с чем проведение SWOT-анализа представляется невозможным. В табл. 1 представлены результаты SWOT-анализа методики формирования рейтинга субъектов РФ на основании показателей эффективности и качества оказания медицинской помощи в субъектах РФ по профилю «терапия». ps202205.4htm00007.jpg В табл. 2 представлены результаты SWOT-анализа методики формирования рейтинга субъектов РФ на основании показателей эффективности и качества оказания медицинской помощи в субъектах РФ по профилю «хирургия (трансплантология)». Основные требования к построению системы рейтингования субъектов РФ В ходе исследования сформулированы следующие требования к системе рейтингования субъектов РФ: •все используемые для построения рейтингов индикаторы должны рассчитываться на основе данных, которые характеризуются точностью, воспроизводимостью, высокой доступностью и простотой сбора; •используемые индикаторы должны быть максимально однородными в целях обеспечения стандартизации сбора данных, методологии расчета и оценки показателей; •каждый индикатор должен оцениваться в сравнении либо с эталонными значениями, установленными на национальном или на международном уровне, а если таковые отсутствуют, то в сравнении с результатами других субъектов РФ; •каждый показатель должен иметь несколько градаций: от красной зоны, которая обозначает худшие значения показателей, до ярко-зеленой зоны, которая отражает лучшие значения показателей; •субъекты РФ могут участвовать в системе рейтингов как добровольно, так и в обязательном порядке, однако результаты построения рейтинга должны быть опубликованы и представлены широкой общественности; •необходима разработка системы мотивации субъектов РФ для участия в системе рейтингов и постоянного повышения результативности и качества оказываемой медицинской помощи; •внутри субъектов РФ необходимо построение системы рейтингов медицинских организаций по различным показателям, так как именно из этих показателей складываются индикаторы на уровне субъекта РФ. Данные требования, сформулированные в ходе исследования, могут стать основой для построения автоматизированной системы бенчмаркинга субъектов РФ на основе показателей эффективности (результативности) и качества оказания медицинской помощи. Особенно актуальной представляется полная или частичная публикация рейтингов субъектов РФ в открытом общественном доступе в целях создания естественной конкурентной среды между субъектами РФ для повышения эффективности и качества оказания медицинской помощи населению. Обсуждение Ряд экспертов сходятся во мнении о необходимости формулировки простых и понятных требований к построению системы рейтингов в сфере здравоохранения [12]. Однако по результатам проведенного исследования установлено, что разные НМИЦ используют различные принципы при построении системы рейтингов, а многие используемые подходы характеризуются крайней разнородностью используемых показателей, отсутствием единой их классификации, отсутствием валидации расчета многих показателей и сложностью сбора первичных данных для большинства используемых показателей. Также важно отметить, что большинство рейтингов субъектов РФ, составляемых в различных отраслях экономики и социальной сферы в России, являются закрытыми для широкой общественности, в том числе в сфере здравоохранения. Однако результаты ряда исследований свидетельствуют о необходимости полной или частичной публикации рейтингов в открытом общественном доступе для создания естественной конкурентной среды (система открытого рейтингования) [5, 6]. Результаты исследования также показали, что НМИЦ часто используют избыточное количество показателей для построения рейтинга субъектов РФ или используют слишком разнородные показатели. Это противоречит результатам исследования, которое свидетельствует о необходимости использования для построения рейтингов только индикаторов, которые характеризуются точностью, воспроизводимостью, высокой доступностью и простотой сбора данных [3]. Используемые индикаторы должны также быть максимально однородными в целях обеспечения стандартизации сбора данных, методологии расчета и оценки данных показателей [9]. Многие существующие рейтинги в системе здравоохранения РФ, в том числе рейтинги, составляемые НМИЦ, не имеют соответствующей привязанной к ним системы мотивации субъектов РФ для участия в системе рейтингов и постоянного повышения результативности и качества оказываемой медицинской помощи. Результаты одного из проведенных исследований свидетельствуют о необходимости выстраивания системы мотивации для того, чтобы существование системы бенчмаркинга приводило к постоянному повышению результативности и качества оказываемой медицинской помощи [7]. В ходе исследования установлено, что во многих субъектах РФ отсутствуют системы рейтингов медицинских организаций по различным показателям, из которых складываются индикаторы на уровне субъекта РФ. Результаты ряда исследований свидетельствуют о том, что наиболее успешно бенчмаркинг применяется при построении рейтингов именно на уровне медицинских организаций по различным показателям и уже далее - на уровне административно-территориальных образований [5, 6]. В рамках реализации федерального проекта «Развитие сети НМИЦ и внедрение инновационных медицинских технологий» остро встает проблема разработки единой методики построения рейтингов субъектов РФ по различным профилям. В ходе исследования на основании анализа публичных отчетов НМИЦ были отобраны три наиболее релевантных и воспроизводимых варианта методики. Первый вариант методики применим для профилей медицинской помощи, с целью оценки деятельности которых накоплены большие объемы аналитических данных либо предусмотрены отдельные федеральные проекты или государственные программы. Описанный подход представляется наиболее предпочтительным для онкологии, кардиологии, сердечно-сосудистой хирургии, психиатрии, психиатрии-наркологии. Второй вариант методики применим для профилей медицинской помощи, не имеющих достаточного объема аналитических данных для оценки деятельности, и системы оперативных мониторингов. Описанный подход представляется наиболее предпочтительным для таких профилей, как детская травматология и ортопедия, офтальмология, стоматология, челюстно-лицевая хирургия. Третий вариант методики применим для профилей медицинской помощи, для оценки деятельности которых отсутствует достаточный объем аналитических данных и системы оперативных мониторингов, но при этом большое значение имеют показатели, характеризующие обеспечение различными ресурсами для оказания медицинской помощи. Описанный подход представляется наиболее предпочтительным для такого профиля, как санаторно-курортное лечение. Таким образом, для построения системы рейтингования субъектов РФ по отдельным профилям оказания медицинской помощи необходимо выделение групп смежных (однородных) профилей и последующее выделение однородных групп показателей по смежным профилям в целях создания единой классификации показателей. Заключение Исследованием установлено, что многие из существующих подходов к формированию рейтинга субъектов РФ основываются на сочетании балльно-рейтинговой оценки и весовых коэффициентов. При этом во всех случаях весовые коэффициенты устанавливались исключительно экспертным методом. На основании результатов проведенного исследования были сформулированы требования к построению системы рейтингования субъектов РФ, учитывающие особенности отечественной системы здравоохранения. Также были проведены сводный анализ и группировка показателей, используемых НМИЦ для построения рейтингов субъектов РФ, проведены экспертная оценка и SWOT-анализ наиболее релевантных методик построения интегральных рейтингов субъектов РФ. Поскольку разные показатели вносят различный вклад в итоговое интегральное значение рейтинга субъектов РФ, целесообразно проведение еще одного исследования для установления весовых коэффициентов для отдельных показателей и для групп показателей в целях дифференцированного учета вклада каждого показателя в интегральный рейтинг. Тем не менее очевидно, что разные параметры и показатели характеризуются различной доступностью первичных данных и сложностью их сбора, что необходимо учитывать при разработке информационных систем, обеспечивающих автоматизированный сбор данных и расчет значений показателя или параметра в реальном времени. Исследование не имело спонсорской поддержки. Авторы заявляют об отсутствии конфликтов интересов.

About the authors

I. A. Mikhailov

Center of Expertise and Quality Control of Healthcare of Minzdrav of Russia; N. A. Semashko National Research Institute of Public Health

Email: mikhailov@rosmedex.ru

V. V. Omelyanovsky

Center of Expertise and Quality Control of Healthcare of Minzdrav of Russia; Russian Medical Academy for Continuous Professional Education, of Minzdrav of Russia; Financial Research Institute of the Ministry of Finance of the Russian Federation

E. S. Samsonova

Center of Expertise and Quality Control of Healthcare of Minzdrav of Russia

V. O. Kusakina

Center of Expertise and Quality Control of Healthcare of Minzdrav of Russia

G. G. Lebedenko

Center of Expertise and Quality Control of Healthcare of Minzdrav of Russia

References

Statistics