Скрининг статей: инструменты и порядок

Скрининг статей: инструменты и порядок

Скрининг — самый трудоёмкий этап обзора. Нужно просмотреть сотни записей и для каждой решить, подходит ли она, причём решение должно быть воспроизводимым.

Разберём порядок работы и инструменты.

Критерии включения

Сформулируйте критерии до начала скрининга.

Они должны быть проверяемыми: популяция, вмешательство, исход, дизайн, язык, годы.

Если критерий нельзя применить к аннотации, уточните формулировку.

Два этапа

Сначала скрининг по названиям и аннотациям.

Затем — по полным текстам.

На первом этапе отсекается основная масса, на втором проверяются детали.

Два рецензента

Независимый скрининг двумя людьми снижает риск пропустить статью.

Решения сравнивают и обсуждают расхождения.

Если расхождение не разрешается, привлекают третьего.

Инструменты

Rayyan и Covidence позволяют загрузить список, отмечать решения и сравнивать их.

Они также помогают выявлять дубли.

Выбор инструмента зависит от доступа и размера выборки.

Работа с аннотациями

Читайте аннотацию целиком, а не только название.

Отмечайте причину исключения, если это требуется протоколом.

Не принимайте решение по одному слову в заголовке.

Полные тексты

Проверьте, соответствует ли статья критериям после чтения методов.

Часть работ исключается из-за дизайна или отсутствия данных.

Фиксируйте причину исключения.

Расхождения

Обсуждайте не «кто прав», а применение критерия.

Если критерий неоднозначен, вернитесь к протоколу.

Спорные случаи стоит описать в статье.

Учёт времени

Скрининг занимает больше времени, чем кажется.

Планируйте этапы и делайте перерывы.

Не пытайтесь просмотреть всё за один день.

Документирование

Ведите таблицу: запись, решение, причина, рецензент.

Сохраняйте экспорт из инструмента.

Числа должны совпадать с блок-схемой PRISMA.

Обучение рецензентов

Проведите пилот на 20–30 записях.

Обсудите расхождения и уточните критерии.

Только после этого начинайте основной скрининг.

Ограничения

Аннотации не всегда отражают содержание.

Инструменты не заменяют суждение.

Автоматизация ускоряет, но не отменяет проверку.

Частые ошибки

• критерии после начала;
• один рецензент;
• решение по заголовку;
• отсутствие причин исключения;
• числа не сходятся с PRISMA.

Как формулировать причины исключения

Причина должна соответствовать критерию, а не быть общим словом.

«Не тот дизайн» лучше уточнить: «когортное исследование без контрольной группы».

Если причин несколько, укажите основную и дополнительную.

Слепой и открытый скрининг

Слепой скрининг скрывает решения второго рецензента.

Это снижает влияние чужого мнения.

Открытый скрининг быстрее, но требует дисциплины.

Учёт языковых ограничений

Если протокол ограничивает язык, это влияет на выборку.

Машинный перевод помогает понять содержание, но не заменяет чтение.

Решение о включении иноязычной статьи фиксируется.

Как ускорять работу

Начните с самых явных случаев: они быстро сокращают список.

Спорные отложите и вернитесь к ним после обсуждения критериев.

Не тратьте время на повторное чтение уже исключённых записей.

Что делать при большом объёме

Разделите выборку на части по датам или журналам.

Проведите пилот на каждой части.

Следите за усталостью: ошибки чаще к концу длинной сессии.

Как вести протокол скрининга

Записывайте дату начала и завершения этапа.

Указывайте, кто участвовал и сколько записей просмотрел каждый.

Отмечайте изменения критериев, если они произошли.

Как работать с полными текстами

Скачивайте статьи в отдельную папку.

Проверяйте, что файл соответствует записи: иногда названия не совпадают.

Фиксируйте, если полный текст не удалось получить.

Как избежать выгорания

Делайте перерывы каждые 45–60 минут.

Не принимайте решения по сложным случаям в конце дня.

Обсуждайте спорные записи с коллегой, а не решайте в одиночку.

Как проверять качество скрининга

Выборочно перепроверьте 10% решений.

Сравните с решением второго рецензента.

Если расхождения частые, вернитесь к критериям.

Как учитывать дубли в скрининге

Перед началом убедитесь, что дубли удалены.

Иначе один и тот же текст будет оцениваться дважды.

Проверяйте записи с похожими названиями.

Как фиксировать прогресс

Отмечайте, сколько записей просмотрено за сессию.

Это помогает планировать оставшуюся работу.

При отставании пересмотрите график, а не критерии: менять правила под темп работы недопустимо.

Как сохранять решения

Экспортируйте результаты скрининга после каждого этапа.

Храните файлы вместе с проектом.

Не полагайтесь только на онлайн-инструмент: доступ может закрыться, а решения должны сохраниться.

Как работать с конфликтом интересов

Если рецензент связан с авторами статьи, это отмечают.

Решение о включении принимает другой человек.

Правило фиксируют в протоколе.

Как учитывать языковые ограничения

Если статья на незнакомом языке, используйте перевод для понимания.

Решение о включении принимает человек, владеющий языком, или команда.

Отметьте, как поступили, и укажите, кто принимал окончательное решение.

Как проверять согласованность

Сравните долю совпадений между рецензентами.

Низкая согласованность означает, что критерии unclear.

Обсудите и уточните формулировки критериев, а затем проведите повторный пилот на спорных случаях.

Чек-лист

• Критерии зафиксированы.
• Пилот проведён.
• Два рецензента работают.
• Расхождения разобраны.
• Причины исключения записаны.
• Числа сверены.

Частые вопросы

Обязательно ли два рецензента?

Для систематического обзора — да, это стандарт.

Можно ли использовать автоматизацию?

Как вспомогательный инструмент, с проверкой человеком.

Сколько статей исключается на этапе аннотаций?

Обычно большая часть; точная доля зависит от темы.