Что такое систематический обзор и для чего он нужен исследователю

Систематический обзор - это исследовательский метод, который по заранее зафиксированному протоколу находит, отбирает и обобщает все доступные научные работы по конкретному вопросу. В отличие от произвольного пересказа источников, такое исследование систематический обзор строит на воспроизводимой стратегии поиска и четких критериях включения и исключения работ. Метод активно используют в медицине, психологии, экологии и социальных науках, где ежегодно публикуют более 10 000 систематических обзоров. Разберем, что такое систематический обзор простыми словами, зачем он нужен исследователю и какие этапы включает его подготовка - от протокола до итоговой публикации.

Систематический обзор: определение и цель исследования

Систематический обзор - это метод научного исследования, который по заранее зафиксированному протоколу ищет, отбирает и обобщает все доступные работы по узко сформулированному вопросу. Такой обзор отличается от обычного пересказа литературы прозрачной, воспроизводимой процедурой: другой исследователь может повторить поиск по тому же протоколу и получить сопоставимый набор источников.

Цель систематического обзора - не рассказать о теме в общих словах, а дать максимально полную и проверяемую картину состояния изученности конкретного вопроса. Зачем вообще нужна такая строгость, если можно просто прочитать десяток статей и сделать вывод самому? Дело в том, что выборочное чтение легко приводит к смещенному выводу: исследователь неосознанно выбирает работы, подтверждающие уже сложившееся мнение, а систематический протокол снижает этот риск за счет заранее прописанных правил поиска и отбора.

Найденный в ходе систематического обзора пробел в изученности вопроса часто становится основой самостоятельного gap-анализа исследований.

Простой литературный обзор может строиться свободно, без жесткого протокола отбора источников. Систематический обзор литературы, в отличие от него, всегда требует зафиксированной методологии поиска и критериев включения. Такую работу часто оформляют как литературный обзор для диссертации, где к структуре и оформлению предъявляют особые требования конкретного совета.

почему обзор называют "систематическим"

Слово "систематический" в названии метода означает не строгость тона, а заданную и повторяемую последовательность действий: протокол, критерии отбора и способ анализа фиксируются до начала поиска источников, а не подстраиваются под уже найденные данные. Именно системность процедуры отличает такой обзор от обычного тематического реферата.

Как появился метод систематического обзора

Идея объединять данные разных исследований появилась задолго до современного термина. В 1753 году шотландский врач Джеймс Линд впервые описал контролируемое сравнение способов лечения цинги, а в 1904 году британский статистик Карл Пирсон свел в одну таблицу данные нескольких исследований вакцинации против брюшного тифа - одну из первых попыток статистически обобщить результаты разных выборок.

Систематический обзор в современном виде оформился гораздо позже. Термин "метаанализ" ввели только в 1975-1976 годах, а ключевую роль в распространении систематических обзоров сыграл британский эпидемиолог Арчи Кокрейн: в 1972 году он раскритиковал медицину за то, что решения в ней принимаются без систематического учета всех доступных доказательств. Массовым инструментом науки систематический обзор стал уже после 2000 года, когда его взяли на вооружение крупные организации здравоохранения. Сегодня ежегодно публикуют более 10 000 новых систематических обзоров, и это число продолжает расти быстрее, чем количество первичных клинических испытаний, на которых такие обзоры строятся.

Кокрейновское сотрудничество

В 1993 году в честь идей Арчи Кокрейна была основана международная организация Cochrane, которая сегодня объединяет более 37 000 специалистов из разных стран и готовит систематические обзоры по вопросам здравоохранения для базы Cochrane Library. Обзоры Cochrane считаются одним из самых строгих стандартов подготовки систематических обзоров в медицине.

Систематический обзор и метаанализ: в чем разница

Систематический обзор и метаанализ часто упоминают через запятую, а в поисковых запросах встречается формулировка "систематический обзор и метаанализ отличия". Путаница понятна: оба метода работают с совокупностью уже опубликованных исследований, но решают разные задачи.

Систематический обзор - это процедура поиска, отбора и качественного обобщения исследований по конкретному вопросу. Метаанализ - статистический инструмент, который при наличии подходящих числовых данных объединяет результаты нескольких исследований в единую оценку эффекта. Возможен систематический обзор без метаанализа - например, если включенные исследования слишком разнородны для статистического объединения данных.

Более подробно про статистическую часть такой связки можно прочитать в материале о том, что такое метаанализ и когда он используется. Статистическая часть такой работы часто требует привлечения специалиста, который выполняет статистический анализ для диссертаций.

Из каких этапов состоит систематический обзор

Методы систематических обзоров подчиняются общей логике: каждый следующий этап зависит от результатов предыдущего, а вся процедура фиксируется в протоколе еще до начала работы с источниками.

1. Формулировка исследовательского вопроса по структуре PICO (популяция, вмешательство, сравнение, исход) и регистрация протокола, например в базе PROSPERO
2. Систематический поиск литературы в нескольких базах данных - PubMed, Scopus, Web of Science, Cochrane Library, eLIBRARY - с привлечением "серой литературы" и материалов конференций
3. Отбор исследований по названию, аннотации и полному тексту с обязательной фиксацией причин исключения каждой работы
4. Извлечение данных по стандартизированной форме, обычно двумя независимыми исследователями
5. Оценка методологического качества и риска смещения каждого включенного исследования
6. Синтез результатов - качественное обобщение или статистическое объединение данных методом метаанализа
7. Оформление и публикация итогового обзора с диаграммой отбора исследований PRISMA

Формулировка вопроса по PICO - частный случай общей работы по постановке научной гипотезы исследования, только вместо гипотезы одного эксперимента формулируется вопрос для целого пласта литературы. Подбор источников для систематического обзора - лишь один из основных методов научного исследования, но именно от тщательности поиска на этом этапе зависит полнота всего последующего анализа.

Планирование систематического обзора по своей логике похоже на подготовку любой научно-исследовательской работы - от формулировки вопроса до итогового отчета.

протокол PROSPERO

База PROSPERO - международный реестр протоколов систематических обзоров, куда исследователи заранее регистрируют вопрос, критерии отбора и планируемые методы анализа. Регистрация протокола до начала поиска литературы снижает риск того, что итоговые критерии отбора подстроят под уже найденные и понравившиеся результаты. База открыта для поиска и проверки любым читателем, что позволяет заранее увидеть, ведется ли похожий систематический обзор другой исследовательской группой.

Какие данные включает систематический обзор литературы

Систематический обзор литературы включает не только сами тексты статей, но и структурированные данные о каждом исследовании: дизайн, размер выборки, ключевые результаты и оценку качества. Систематический обзор данных строится сразу на нескольких типах первичных источников, а не на одном узком жанре публикаций.

Перед статистическим объединением данных исследователи обычно готовят описательную статистику включенных исследований - сводную таблицу их ключевых характеристик. Систематические обзоры включают также данные диссертационных исследований, поэтому заранее полезно продумать подбор литературы к диссертации так, чтобы структура поиска соответствовала требованиям систематического обзора.

Как проводится оценка систематических обзоров

Оценка систематических обзоров нужна не только авторам исходных исследований, но и тем, кто использует готовый обзор как источник в своей работе: не любой обзор, назвавший себя систематическим, действительно соответствует этому стандарту.

• Инструмент AMSTAR 2 - чек-лист из 16 пунктов для оценки методологического качества самого систематического обзора
• Инструмент ROBIS - оценивает риск смещения на этапах отбора исследований, извлечения данных и синтеза результатов
• Стандарт отчетности PRISMA 2020 - проверяет полноту и прозрачность описания процедуры в опубликованной статье
• Наличие зарегистрированного протокола, например в базе PROSPERO, до начала поиска литературы

Cochrane Library прямо не рекомендует заменять полноценную оценку риска смещения по нескольким доменам упрощенной балльной шкалой качества - единая цифра слишком грубо описывает сложную методологическую картину исследования. Журналы, входящие в системы индексации научных статей Scopus и Web of Science, чаще требуют соответствия стандарту PRISMA при публикации систематических обзоров.

стандарт PRISMA 2020

Стандарт PRISMA описывает не то, как проводить систематический обзор, а то, как его правильно описать в публикации: от структуры аннотации до диаграммы отбора исследований. Действующую версию PRISMA 2020 опубликовали в 2021 году, и сегодня следование этому стандарту требуют более 170 научных журналов.

Какие виды систематических обзоров существуют

Систематический научный обзор - не единый жанр, а целое семейство методов с общей логикой протокола, но разными задачами.

Всего методологи выделяют более 30 разновидностей систематических обзоров, но перечисленные выше встречаются в исследовательской практике чаще остальных. Нужно ли рядовому исследователю разбираться во всех тридцати видах? Нет, для большинства работ достаточно понимать различие между несколькими основными видами из таблицы выше.

Выбор конкретного вида систематического обзора обычно определяется задачей исследования и требованиями к методам исследований в общественных науках или медицине конкретного направления. Готовый систематический обзор чаще всего публикуют как один из видов научных статей - обзорную статью в рецензируемом журнале.

Как читать результаты систематических обзоров в научной статье

Результатом систематических обзоров редко становится единственный вывод в одном предложении - чаще это комплекс данных, которые нужно уметь читать вместе.

• Диаграмма PRISMA flow - показывает, сколько источников нашли, отсеяли и включили на каждом этапе отбора
• Таблица характеристик включенных исследований - дизайн, выборка, основные результаты каждой работы
• Форест-плот (при наличии метаанализа) - визуализация объединенного эффекта по всем исследованиям
• Раздел об ограничениях и риске смещения включенных исследований

Систематический обзор статьи, которую читает исследователь, обычно начинается с аннотации, где кратко изложены вопрос, число включенных исследований и главный вывод - с этого раздела и стоит начинать оценку, нужно ли изучать обзор целиком.

Общие принципы работы с первоисточником описаны в материале о том, как читать научную статью, и они применимы к разбору систематического обзора не меньше, чем к любой другой эмпирической работе. Прежде чем ссылаться на обзор в собственной работе, полезно провести и отдельный анализ научной статьи, из которой берутся ключевые данные.

Если по итогам такого анализа систематический обзор ложится в основу собственного исследования, дальше обычно требуется написание и публикация статьи ВАК с учетом найденных данных.

форест-плот и альбатрос-плот

Классический форест-плот подходит для исследований со схожими числовыми показателями эффекта. Для более разнородных данных, которые нельзя свести к одной метрике, в последние годы все чаще используют альбатрос-плот - альтернативный способ визуализации результатов систематического обзора без строгого объединения в единую цифру.

Материалы для скачивания: Практический пример оформления протокола систематического обзора и поисковой стратегии по стандарту PRISMA 2020 доступен в формате документа: Образец протокола систематического обзора по ГОСТ (PDF).

Ограничения и критика систематических обзоров

Систематический обзор - не гарантия истины в последней инстанции, а метод со своими ограничениями, которые нужно учитывать при интерпретации выводов.

• Устаревание выводов - около 7% систематических обзоров нуждаются в обновлении уже на момент публикации, 4% - в течение года, 11% - в течение двух лет
• Смещение публикации - по данным кампании AllTrials почти половина клинических испытаний никогда не публикует результаты, а положительные результаты публикуют почти в два раза чаще отрицательных
• Неравное качество включенных исследований - объединение методологически слабых работ не делает итоговый вывод более надежным
• Пересмотр выводов при обновлении - в анализе 377 обзоров Cochrane около 9% обновленных через четыре года меняли итоговый вывод

Дополнительным фактором риска остается финансирование исходных исследований: работы, оплаченные производителем изучаемого метода или препарата, в среднем чаще показывают более благоприятный результат, чем независимые испытания той же темы. Значит ли это, что систематическим обзорам нельзя доверять? Нет - речь скорее о том, что даже самый строгий метод синтеза данных не заменяет критического чтения и проверки первоисточников читателем.

Систематический обзор чаще применяют при подготовке кандидатской диссертации по медицине или психологии. Похожий подход используют и при работе над докторской диссертацией, где требования к полноте источников еще выше. Отдельные элементы систематического поиска встречаются также в магистерской диссертации. Похожий, но упрощенный подход применяют и в выпускной квалификационной работе, хотя полноценный протокол там обычно не требуется.

искусственный интеллект в систематических обзорах

С 2023 года исследователи все чаще используют инструменты на основе искусственного интеллекта для ускорения поиска и отбора источников на этапе подготовки систематического обзора. Убедительных данных о том, что такие инструменты дают более точный результат или заметно снижают трудозатраты по сравнению с классической процедурой, пока недостаточно.

DisserTop - помощь с систематическим обзором на заказ

Специалисты DisserTop помогают подготовить систематический обзор литературы на любом этапе - от разработки протокола поиска до итогового оформления работы по требованиям PRISMA. Команда учитывает специфику темы по медицине, психологии, педагогике и социальным наукам, а также требования конкретного научного руководителя и совета. При необходимости специалисты берут на себя подготовку научной статьи по результатам обзора перед подачей в журнал. Отдельно можно заказать рецензию к научной статье, чтобы проверить, насколько текст соответствует требованиям ГОСТ и выбранного издания.