Etiqueta: Protocolo

Antes de comenzar una revisión sistemática hay buscar y evaluar revisiones relacionadas

Campos1 comentario

Uno de los primeros pasos en la planificación de nuestra revisión sistemática es la de buscar revisiones sistemáticas existentes de nuestra área de interés. Es decir, hay que buscar la existencia o no de revisiones sobre el tema publicadas y, si las hay, analizarlas para decidir si tiene cabida hacer la revisión o no.

El motivo para ello es el de evitar las revisiones redundantes. Estas se pueden definir como revisiones que ya se han realizado sobre el mismo tema, con las mismas o similares preguntas y métodos de investigación, y que han llegado a conclusiones similares o idénticas. Estas revisiones se realizan a menudo de forma innecesaria, lo que provoca varios perjuicios e ineficiencias (1).

La multiplicación de revisiones sistemáticas redundantes plantea cuestiones científicas, éticas y económicas a investigadores y editores. 

Presentación «Antes de comenzar una revisión sistemática hay que buscar y evaluar revisiones relacionadas: Planificación de nuestra revisión para evitar revisiones redundantes».

Perjuicios de las revisiones sistemáticas redundantes

1. Desperdicio de recursos: La realización de revisiones redundantes supone una pérdida de tiempo, esfuerzo y recursos que podrían haberse utilizado para cuestiones de investigación nuevas y más relevantes.

2. Inconsistencias y contradicciones: Las revisiones redundantes pueden llegar a conclusiones diferentes debido a variaciones en la metodología o en la interpretación de los resultados, lo que puede causar confusión e incoherencias en la literatura.

3. Sesgo de publicación: Múltiples revisiones sobre el mismo tema pueden aumentar la probabilidad de informes selectivos y sesgo de publicación, ya que los investigadores pueden publicar solo las revisiones con resultados favorables.

4. Confundir a los profesionales sanitarios: Múltiples revisiones con resultados contradictorios pueden llevar a confusión a los profesionales sanitarios, lo que se traduce en decisiones de tratamiento subóptimas para los pacientes.

¿Cuándo está justificada una revisión sistemática redundante?

Solo en los casos de que: 1) el alcance de las revisiones existentes no sea la misma; 2) no exista una revisión anterior; 3) exista, pero esté obsoleta (podríamos decidir actualizarla desde la fecha de la revisión anterior); o 4) exista, pero sea de mala calidad, tendría justificación hacer una nueva revisión. En ese caso, el otro equipo puede decidir abordar ese tema de nuevo con métodos adecuados. Tales casos deben justificarse adecuadamente en la nueva revisión, apoyando esta decisión con pruebas de que la revisión anterior era inadecuada. Por ejemplo, el nuevo equipo podría proporcionar un análisis transparente de la calidad metodológica de la primera revisión utilizando la herramienta AMSTAR 2 (2), con los detalles de este análisis reportados en un archivo suplementario.

Si el equipo de la revisión es consciente de la existencia de una revisión sistemática finalizada con métodos adecuados, la única decisión apropiada para seguir adelante con el mismo tema sería llevar a cabo una actualización de dicha revisión sistemática. Aun así, algunas actualizaciones pueden no considerarse justificadas. Por ejemplo, si una gran revisión existente se actualiza con un nuevo estudio que probablemente no repercuta en los resultados, es razonable cuestionar el propósito de dicha actualización. Cochrane considera una revisión como «estable» si la última búsqueda no identificó ningún estudio potencialmente relevante que pudiera cambiar las conclusiones» (Babić A, Poklepovic Pericic T, Pieper D, Puljak L. How to decide whether a systematic review is stable and not in need of updating: Analysis of Cochrane reviews. Res Synth Methods. 2020 Nov;11(6):884-890. doi: 10.1002/jrsm.1451. PMID: 32890455.).

¿Dónde buscamos revisiones sistemáticas?

Por un lado, deberíamos buscar la existencia de procolos de revisiones sistemáticas en curso. Para ello deberíamos buscar en las plataformas donde es común su registro (ver entrada «Dónde registrar el protocolo de una Revisión Sistemática«; 3-4). Estas fuentes incluyen a PROSPERO, OSF, pasando por búsqueda en bases de datos tradicionales como MEDLINE.

Puede darse el caso de que encontremos «revisiones zombies» (5). Estos son aquellas cuyos registros de protocolo son abandonadas, por ejemplo, en PROSPERO. Para evitarlo, PROSPERO está desarrollando nueva versión que mejorará la funcionalidad de enviar recordatorios a los autores, solicitándoles que actualicen su estado de revisión y añadan detalles de publicación. También la organización Campbell contacta a los autores anualmente para preguntar si los equipos están procediendo con títulos y protocolos registrados (https://twitter.com/vawelch/status/1643576924998909953?s=20).

Además de buscar protocolos, hemos de localizar revisiones sistemáticas ya publicadas. Para ello buscaremos en bases de datos, así como en la Cochrane Library y Epistemonikos (ver entrada «Planificación de una revisión sistemática: Pasos para determinar la viabilidad«).

Bibliografía

  1. Puljak, L., Lund, H. Definition, harms, and prevention of redundant systematic reviews. Syst Rev. 2023;12(63). Disponible en: https://doi.org/10.1186/s13643-023-02191-8.
  2. Shea BJ, Reeves BC, Wells G, Thuku M, Hamel C, Moran J, Moher D, Tugwell P, Welch V, Kristjansson E, Henry DA. AMSTAR 2: a critical appraisal tool for systematic reviews that include randomised or non-randomised studies of healthcare interventions, or both. BMJ. 2017 Sep 21;358:j4008. doi: 10.1136/bmj.j4008. PMID: 28935701; PMCID: PMC5833365.
  3. Campos Asensio C. Necesidad de protocolo en las revisiones de síntesis de evidencia y dónde registrarlo. Biblioboletín. 2022; Junio (13):9. Disponible en: https://repositoriosaludmadrid.es//handle/20.500.12530/54668
  4. Pieper, D., Rombey, T. Where to prospectively register a systematic review. Syst Rev. 2022;11(8). Disponoible en: https://doi.org/10.1186/s13643-021-01877-1
  5. Andrade R, Pereira R, Weir A, Ardern CL, Espregueira-Mendes J. Zombie reviews taking over the PROSPERO systematic review registry. It’s time to fight back! Br J Sports Med. 2019 Aug;53(15):919-921. doi: 10.1136/bjsports-2017-098252. PMID: 29021246.

Dónde registrar el protocolo de una Revisión Sistemática

Campos5 comentarios

Un protocolo es un documento que presenta un plan explícito para una revisión sistemática. El protocolo detalla los fundamentos y el enfoque metodológico y analítico a priori de la revisión.

En él se describe la razón por al que hacemos la revisión, los objetivos y los métodos que se usarán para localizar, seleccionar y evaluar los estudios de forma crítica, además de cómo se recogerán y analizarán los datos de los estudios incluidos. Entre otros objetivos, está el de promover la transparencia de los métodos y reducir el sesgo, que pueda ser revisado y reducir la duplicación innecesaria de esfuerzos entre los investigadores.

«Toda revisión sistemática ha de seguir métodos científicos establecidos a priori» Finding What Works in Health Care. Standards for Systematic Reviews (2011)

Para evitar sesgos, los autores no deben modificar el protocolo en función de los resultados analizados en su revisión sistemática (RS). Sin embargo, pueden surgir problemas inesperados que hagan necesario realizar cambios en los criterios de elegibilidad especificados en el protocolo.

“La publicación del protocolo, reduce el impacto de sesgos, fomenta la transparencia de los métodos y los procesos planteados, disminuye la posibilidad de duplicación, y permite la revisión por pares de los métodos planificados” Cochrane Handbook

¿Dónde podemos publicar nuestro protocolo? Veamos varias opciones:

PROSPERO (https://www.crd.york.ac.uk/PROSPERO/)

Este fue el primer registro internacional para revisiones sistemáticas (PROSPERO) que se lanzó en 2011.

Es una base de datos internacional de revisiones sistemáticas registradas prospectivamente de salud y, en general, donde hay un resultado relacionado con la salud. 

Realizado por el Centre for Reviews and Disseminations (CRD) de la Universidad de York, UK, tiene como objetivo proporcionar una lista completa de revisiones sistemáticas registradas al inicio para ayudar a evitar la duplicación y reducir la oportunidad de sesgo de informe al permitir la comparación de la revisión completa con lo que se planeó en el protocolo. 

Debido a un incremento sin precedentes de solicitud de registro (en 2019 se registraron 14.570 protocolos) y para evitar el retraso que esto estaba generando, se da prioridad a los registros del Reino Unido. 

¿Qué requisitos debe tener nuestro protocolo para registrarlo en PROSPERO?:

  1. Registro exclusivo de protocolos de revisiones sistemáticas de estudios en humanos o para registrar una revisión de estudios en animales relevantes para la salud humana.
  2. No permite registrar REVISIONES DE ALCANCE o estudios in-vitro. 
  3. A partir de octubre de 2019, PROSPERO requiere una inscripción previa y que los autores no hayan comenzado la extracción de datos.
  4. Las revisiones Cochrane siempre tienen protocolo que, además de en sus registros, también se registra de forma automática en PROSPERO.

Por todo ello, antes de enviar el registro de un protocolo a PROSPERO, hay que contestar a estas preguntas para evitar que pierda tiempo completando un formulario si su proyecto no es elegible para PROSPERO:

  • ¿Es esta una revisión del alcance, la literatura o el mapeo?
  • ¿Tiene esta revisión al menos un resultado directamente relacionado con la salud humana o es una revisión de metodología que tiene un vínculo claro con la salud humana?
  • ¿Es esta una revisión Cochrane?
  • ¿Se trata de una revisión mínima o parcial realizada para un curso de capacitación o trabajo en clase o está utilizando el sistema para aprender a registrarse?
  • ¿Has buscado en PROSPERO para identificar revisiones similares?
  • ¿Has escrito el protocolo antes de hacer el registro?
  • ¿Sois más de una persona?
  • ¿Vas a intentar publicar los resultados de tu RS y/o hacer público los resultados cuando los tengas?
  • ¿En qué fase te encuentras de tu RS? (no permiten el registro de RS que hayan completado la extracción de los datos).

OSF Registries (https://osf.io/registries)

La plataforma OSF (Open Science Framework) se puede registrar previamente el protocolo.

Esta es una opción también útil si no se publica una revisión sistemática, por ejemplo, una revisión de alcance (scoping review).

BMC SYSTEMATIC REVIEWS (https://systematicreviewsjournal.biomedcentral.com/submission-guidelines/preparing-your-manuscript/protocol)

En 2012, se inició la primera revista dedicada a publicar exclusivamente productos de revisión sistemática (incluidos los protocolos), Systematic Reviews de BioMed Central (otras revistas también han comenzado a publicar protocolos de revisión). Esta revista de acceso abierto publica protocolos de revisiones sistemáticas ampliamente relacionadas con las ciencias de la salud.

INPALSY (https://inplasy.com/)

Cuando se envía un protocolo, nuestro registro ORCID se actualiza automáticamente a medida que el trabajo se registra en INPLASY.

El International Plataform of Registered Systematic Review and Meta-analysis Protocols está disponible desde 2020 y acepta protocolos de revisiones sistemáticas y de revisiones de alcance. No está restringido a ninguna disciplina o campo y, al igual que OSF Registries, proporciona un DOI. Sin embargo, hay que tener en cuenta que no es gratuito.

SYSREAF (https://www.syreaf.org/protocol/)

Systematic Reviews for Animals & Food es un portal que nos permite registra un protocolo de una revisión de seguridad alimentaria, veterinaria y de otros profesionales de la salud animal, así como de sanidad y bienestar animal.

Systematic Review Data Repository Plus (SRDR+) (https://srdrplus.ahrq.gov/projects)

Repositorio web gratuito de datos de revisión sistemática desarrollado por el Brown University Evidence-based Practice Center (EPC, con el apoyo de la Agency for Healthcare Research and Quality (AHRQ).

Este recurso sirve como herramienta de archivo y extracción de datos y se comparte entre organizaciones e individuos que producen revisiones sistemáticas en todo el mundo, lo que permite la creación de una base de datos central de datos de revisiones sistemáticas que se pueden criticar, actualizar y aumentar de forma continua.

REPOSITORIO

Muchas veces lo que tenemos más cerca no es siempre lo que antes utilizamos. Por eso creo interesante recordaros que podemos registrar nuestro protocolo o los datos de nuestra revisión en un repositorio como el Repositorio institucional de la Consejería de Sanidad de la Comunidad de Madrid y del que ya os hablé en una entrada anterior de este blog (¿Te has planteado compartir tus artículos en el Repositorio Institucional de Comunidad de Madrid?).

BIBLIOGRAFÍA

Page MJ, Cumpston M, Chandler J, Lasserson T. Chapter III: Reporting the review. In: Higgins JPT, Thomas J, Chandler J, Cumpston M, Li T, Page MJ, Welch VA (editors). Cochrane Handbook for Systematic Reviews of Interventions version 6.2 (updated February 2021). Cochrane, 2021. Available from www.training.cochrane.org/handbook.

Moher D, Shamseer L, Clarke M, Ghersi D, Liberati A, Petticrew M, Shekelle P, Stewart LA. Preferred Reporting Items for Systematic Review and Meta-Analysis Protocols (PRISMA-P) 2015 statement. Syst Rev. 2015;4(1):1. doi: 10.1186/2046-4053-4-1

Shamseer L, Moher D, Clarke M, Ghersi D, Liberati A, Petticrew M, Shekelle P, Stewart LA, the PRISMA-P Group. Preferred Reporting Items for Systematic Review and Meta-Analysis Protocols (PRISMA-P) 2015: elaboration and explanation. BMJ 2015.349:g7647. doi: 10.1136/bmj.g7647

PLoS Medicine Editors. Best practice in systematic reviews: the importance of protocols and registration. PLoS Med. 2011 Feb;8(2):e1001009. doi: 10.1371/journal.pmed.1001009. PMID: 21364968; PMCID: PMC3042995.

Pieper D, Rombey T. Where to prospectively register a systematic review. Syst Rev. 2022 Jan 8;11(1):8. doi: 10.1186/s13643-021-01877-1. PMID: 34998432.

PRISMA-P: elementos de informes preferidos para los protocolos de revisión sistemática y metaanálisis

Campos1 comentario

Menos de la mitad de las revisiones sistemáticas indexadas en MEDLINE informan que trabajan a partir de un protocolo debido, en gran parte, a la falta de conocimiento de los autores sobre cómo escribirlos y qué incluir. Sin embargo, la preparación de un protocolo es un componente esencial del proceso de revisión sistemática. En el contexto de revisiones sistemáticas y meta-análisis, un protocolo es un documento que presenta un plan explícito para una revisión sistemática. El protocolo detalla los fundamentos y el enfoque metodológico y analítico a priori de la revisión.

PRISMA-P es una guía para ayudar a los autores a preparar protocolos para revisiones sistemáticas y metaanálisis que les proporcionen un conjunto mínimo de elementos para ser incluidos en el protocolo. El objetivo de un protocolo es proporcionar los fundamentos para la revisión y el enfoque metodológico y analítico planeado previamente, antes de iniciar una revisión. Los investigadores deben preparar un protocolo de revisión antes de registrarlo en PROSPERO (Registro Internacional Prospectivo de Revisiones Sistemáticas), de modo que los detalles que requieran mayor consideración se puedan ser tenidos en cuenta con anticipación, evitando la necesidad de enmiendas múltiples a la información de registro. Los ítems de PRISMA-P se han derivado principalmente de la lista de verificación de PRISMA y los ítems del registro de PROSPERO, a fin de facilitar el registro sin problemas.

En la tabla podéis ver la clecklist PROSPERO-P y en este enlace los diferentes documentos para su descarga.

PRISMA-P