Что такое систематический обзор: когда он нужен и как устроен

Систематический обзор — исследование существующих исследований. Команда определяет, какие работы способны ответить на вопрос, затем находит и оценивает их документированными методами. Введение Cochrane описывает сбор подходящих доказательств с минимизацией систематических ошибок. Ни один поиск не гарантирует обнаружения всех соответствующих исследований.

Представьте две команды, читающие одни и те же пятьдесят статей. Одна выбирает примеры в поддержку своего аргумента. Другая применяет заранее заданные критерии, фиксирует исключения, оценивает ограничения и синтезирует результаты явным методом. Различие — в решениях и возможности их проверить, а не в длине библиографии.

След доказательств должен связывать каждый вывод с исходными исследованиями. Читателю нужно понимать, почему исследование включили, как связали несколько его отчётов и откуда извлечён результат. Записи позволяют проверить суждения, но не делают все решения механическими и не гарантируют согласия другой команды.

«Обзор литературы» — широкое понятие: обсуждение в диссертации, критический разбор области или обзор с систематическими методами. Изучайте цель и методы, а не только название. Нарративный обзор может развить полезный аргумент, не претендуя на представление всех подходящих исследований.

Обзор области исследования описывает объём, характеристики или понятия доказательной базы. У него собственные методы; это не менее качественная версия обзора эффектов. См. руководство JBI по обзорам области исследования. Метаанализ относится к другому уровню: это статистическая техника, применяемая внутри систематического обзора. Сам по себе он не выполняет поиск или оценку.

Начните с решения, которому должны помочь результаты. В вымышленном примере учебная команда хочет знать, меняет ли конкретная программа по сравнению с обычным обучением баллы участников первого года через 12 недель. Ей нужны оценка различия, её неопределённость и оценка подтверждающих доказательств. Популяцию, сравнение, исход, срок и подходящие дизайны задают до того, как результаты повлияют на выбор.

Если вопрос звучит как «Как цифровое обучение изучалось в разных профессиях?», нужна карта популяций, дизайнов и тем, поэтому лучше может подойти обзор области исследования. Вопросы об опыте, механизмах или внедрении могут требовать качественного или смешанного синтеза. Не сводите каждый вопрос к эффекту вмешательства.

До начала найдите существующие обзоры и протоколы. Оправдывают ли обновление новые исследования, изменившиеся условия или ограничения прежних методов? Другое название само по себе не повод повторять работу. Укажите, кто воспользуется ответом и что остаётся неопределённым: это поможет определить границы и нужную экспертизу.

Для учебного вопроса протокол задаст критерии, источники, отбор, сбор данных, оценку и синтез. Позднейшие изменения фиксируйте с датами и причинами. Исследование может подходить для обзора, не предоставляя данные для каждого запланированного синтеза; руководство Cochrane по включению объясняет это различие.

Ищите в подходящих источниках и сохраняйте стратегии, даты и выгрузки. Базы, регистры и поиск по цитированиям могут вносить вклад; ранжирование поисковика не является полной основой выборки. Информационный специалист поможет спроектировать поиск. Руководство Cochrane по поиску описывает методические решения.

Вымышленный пример прослеживает четыре отчёта: регистрационную запись, основную статью и последующее наблюдение исследования A, а также статью исследования B. Это два исследования, а не четыре независимые работы. Свяжите отчёты до извлечения результатов, чтобы поздняя публикация добавляла сведения без двойного учёта участников.

После отбора определите поля извлечения и используйте оценку, соответствующую дизайнам и результатам. Таблица показывает записи каждого этапа, а не наблюдаемые результаты обучения. Эти материалы также поддерживают итоговый отчёт PRISMA, который описывает реально выполненную работу.

Систематический обзор не обязан вычислять объединённый эффект. Объединение может быть неуместным при существенно разных вопросах, несовместимых исходах или отсутствии пригодных оценок и неопределённости. Решение определяется вопросом и доказательствами. Если количественное объединение обоснованно, объяснение метаанализа показывает, что проверить до выбора модели.

В учебном примере балл сразу после курса не отвечает автоматически на вопрос о 12 неделях. Разделяйте немедленные и более поздние исходы, указывайте группировку и способ сравнения. Структурированное представление должно включать реальные оценки, неопределённость и ограничения, когда они доступны; наш учебный пример таких наблюдений не содержит.

Без объединённого числа всё равно нужен явный синтез. Подсчёт статистически значимых исследований ненадёжен: значимость зависит и от точности. Cochrane описывает другие методы синтеза; руководство по синтезу доказательств связывает различные задачи с применимым набором инструментов.

Изучайте включённые исследования и процесс обзора. В испытании могут отсутствовать исходы; обзор может создать другую проблему, ограничив поиск или выбрав результаты после их просмотра. Оценка исследований не оценивает автоматически все решения обзора; глава Cochrane о систематических ошибках поясняет различие.

Риск систематической ошибки отличается и от уверенности в совокупности доказательств. Последняя оценивает поддержку вывода с учётом несогласованности, неточности, косвенности и отсутствующих данных, где это уместно. Большая выборка не универсальный балл качества. Применяйте признанную систему при необходимости, например из руководства Cochrane об уверенности.

Для учебной команды даже точная краткосрочная оценка может не отвечать на вопрос о длительном обучении или другой группе. Читайте ограничения и дату последнего поиска, а не только год публикации. Четыре вопроса ниже связывают оценку с вашим решением.

• Могу ли я проследить поиск, отбор и связь доказательств с отдельными исследованиями?

• Какие ограничения исследований или обзора способны повлиять на результат?

• Насколько неопределён вывод и различаются ли недостаток доказательств и доказательства отсутствия важного эффекта?

• Подходят ли мне популяция, условия, исход, срок наблюдения и давность доказательств?

Полезный первый результат — согласованный вопрос и реалистичный путь к ответу. До полного протокола составьте короткую записку, как в вымышленном примере. Её пункты обозначают будущую работу, а не утверждают, что поиск, оценка или обзор уже завершены.

Используйте записку, чтобы продолжить работу, сузить вопрос, обновить существующий обзор или привлечь специалистов. Затем разработайте полный протокол и проверьте неоднозначные критерии на небольшом разнообразном наборе записей. Если программа поможет отбору или извлечению, оцените инструменты систематического обзора по этим требованиям.