Manuales, guías y estándares para revisiones sistemáticas de precisión de pruebas diagnósticas

En una entrada anterior comentaba los manuales, guías y estándares para hacer y reportar/informar una revisión sistemática.

Pero si estás interesado en las revisiones sistemáticas de precisión de pruebas diagnósticas, aquí tienes recopilados los principales recursos que has de conocer.

Si conoces alguno más te ruego me lo hagas llegar.

¿Es necesario la revisión por pares de la estrategia de búsqueda de una revisión sistemática?

Debido a la complejidad de la búsqueda de evidencia en las revisiones sistemáticas, se debe tener mucho cuidado en el desarrollo y ejecución de las estrategias de la búsqueda electrónica. Se han detectado frecuentes errores en las estrategias de búsqueda tales como errores de ortografía, errores de truncamiento, error de operador lógico, referencias de líneas de consulta incorrectas, redundancia sin justificación, la falta de términos tanto en lenguaje natural como en lenguaje controlado y aquellos relacionados con los MeSH, etc. (1-3).

Por este motivo, siempre que sea posible hay que realizar una revisión por pares de la estrategia para identificar los errores más habituales, mejorar la calidad y reducir no solo el riesgo de perder estudios relevantes, sino también el riesgo de identificar un número innecesariamente elevado de registros irrelevantes.

Recientemente se ha publicado las recomendaciones Cochrane para realizar revisiones rápidas (4) en las que, a diferencia de la guía MECIR (Methodological Expectations for Cochrane Intervention Reviews), recomiendan la revisión por pares de, al menos, una estrategia de búsqueda (por ejemplo, MEDLINE) (R12).

PRESS (Peer Review of Electronic Search Strategies (5) es un instrumento concebido y creado con el objetivo de realizar y evaluar estrategias de búsqueda para síntesis de evidencia. PRESS proporciona descripciones de seis dominios principales para su uso como pautas para las prácticas de los bibliotecarios y para los editores como instrumento para la evaluación metodológica general de las revisiones.

Los seis dominios principales de la lista de verificación de PRESS 2015 son:

  • Traducción de la pregunta de investigación.
  • Operadores booleanos y de proximidad.
  • Encabezamientos de materia.
  • Búsqueda de palabras de texto (texto libre).
  • Ortografía, sintaxis y números de línea.
  • Límites y filtros.

La revisión por pares de las búsquedas debe tener lugar en dos etapas importantes del proceso de síntesis de la evidencia: al comienzo del proyecto, antes de que se realicen las búsquedas, y en la etapa previa a la publicación (6).

BIBLIOGRAFÍA

  1. Elliott JH, Turner T, Clavisi O, Thomas J, Higgins JP, Mavergames C, Gruen RL. Living systematic reviews: an emerging opportunity to narrow the evidence-practice gap. PLoS Med. 2014 Feb 18;11(2):e1001603. doi: 10.1371/journal.pmed.1001603. eCollection 2014 Feb. PubMed PMID: 24558353; PubMed Central PMCID: PMC3928029. Disponible en: http://dx.plos.org/10.1371/journal.pmed.1001603
  2. Salvador-Oliván JA, Marco-Cuenca G, Arquero-Avilés R. Errors in search strategies used in systematic reviews and their effects on information retrieval. J Med Libr Assoc. 2019 Apr;107(2):210-221. doi: 10.5195/jmla.2019.567. PMID: 31019390; PMCID: PMC6466507.
  3. Spry C, Mierzwinski-Urban M. The impact of the peer review of literature search strategies in support of rapid review reports. Res Synth Methods. 2018 Dec;9(4):521-526. doi: 10.1002/jrsm.1330. PMID: 30408843.
  4. Garritty C, Gartlehner G, Nussbaumer-Streit B, King VJ, Hamel C, Kamel C, Affengruber L, Stevens A. Cochrane Rapid Reviews Methods Group offers evidence-informed guidance to conduct rapid reviews. J Clin Epidemiol. 2021 Feb;130:13-22. doi: 10.1016/j.jclinepi.2020.10.007. PMID: 33068715; PMCID: PMC7557165.
  5. McGowan J, Sampson M, Salzwedel DM, Cogo E, Foerster V, Lefebvre C. PRESS Peer Review of Electronic Search Strategies: 2015 Guideline Statement. J Clin Epidemiol. 2016 Jul;75:40-6. doi: 10.1016/j.jclinepi.2016.01.021. PMID: 27005575.
  6. Lefebvre C, Duffy S. Peer review of searches for studies for health technology assessments, systematic reviews, and other evidence syntheses. Int J Technol Assess Health Care. 2021; 37(1):E64.

Diagrama de flujo PRISMA 2020

Ya os comentaba en la entrada anterior “Actualización de la guía para la presentación de informes de revisiones sistemáticas: desarrollo de la declaración PRISMA 2020” que la declaración PRISMA se había actualizado (y que podéis encontrar traducida al español por Rafa Bravo aquí).

En el siguiente documento tenéis una tabla con los recursos de PRISMA 2020: dónde encontrar qué. Traducida de: McKenzie JE, et al. Updated reporting guidance for systematic reviews: Introducing PRISMA 2020 to readers of the Journal of Affective Disorders. J Affect Disord. 2021;292:56-57. DOI: 10.1016/j.jad.2021.05.035.

Hoy quiero hablar del nuevo diagrama de flujo de PRISMA 2020. Los diagramas de flujo en las síntesis de evidencia permiten al lector comprender rápidamente los procedimientos básicos utilizados en una revisión y examinar la criba y selección de estudios a lo largo del proceso de revisión. 

Con respecto al diagrama de flujo PRISMA publicado en 2009, la nueva versión tiene importantes novedades que podemos ver en la siguiente plantilla:

Plantilla de diagrama de flujo PRISMA 2020 para revisiones sistemáticas (traducida del original por Rafael Bravo)

El nuevo diseño está adaptado a partir de diagramas de flujo propuestos por Boers, Mayo-Wilson et al. y Stovold et al. Las cajas en gris solo deben completarse si procede; de lo contrario, deben ser eliminadas del diagrama de flujo. https://doi.org/10.1371/journal.pmed.1003583.g001

Y donde:

Documento (“report”) hace referencia a un documento (papel o electrónico) que proporciona información sobre un estudio en particular. Podría ser un artículo de revista, una preimpresión, resumen de conferencia, el registro de estudio, informe de estudio clínico, tesis, manuscrito inédito, informe gubernamental o cualquier otro documento que proporcione información relevante.

Registro (“record”) es el título o resumen (o ambos) de un documento indexado en una base de datos o sitio web (por ejemplo, un título o resumen para un artículo indexado en MEDLINE). Los registros que hacen referencia al mismo documento (por ejemplo, el mismo artículo de la revista) son “duplicados”; sin embargo, los registros que se refieren a documentos que son similares (por ejemplo, un resumen similar presentado a dos congresos diferentes) deben considerarse únicos.

Estudio (“study”) es una investigación, como un ensayo clínico, que incluye un grupo definido de participantes y una o más intervenciones y resultados. Un “estudio” puede tener varios documentos. Por ejemplo, los documentos podrían incluir el protocolo, el plan de análisis estadístico, las características de referencia, los resultados del desenlace primario, los resultados de los daños, los resultados de los desenlaces secundarios y los resultados de los análisis mediadores y moderadores adicionales.

Hay disponible una herramienta DiagrammeR R que nos permite desarrollar un diagrama de flujo personalizable que cumple con los estándares PRISMA 2020.

BIBLIOGRAFÍA

Page MJ, McKenzie JE, Bossuyt PM, Boutron I, Hoffmann TC, Mulrow CD, Shamseer L, Tetzlaff JM, Akl EA, Brennan SE, Chou R, Glanville J, Grimshaw JM, Hróbjartsson A, Lalu MM, Li T, Loder EW, Mayo-Wilson E, McDonald S, McGuinness LA, Stewart LA, Thomas J, Tricco AC, Welch VA, Whiting P, Moher D. The PRISMA 2020 statement: an updated guideline for reporting systematic reviews. BMJ. 2021 Mar 29;372:n71. doi: 10.1136/bmj.n71. PMID: 33782057; PMCID: PMC8005924.

Boers M. Graphics and statistics for cardiology: designing effective tables for presentation and publication. Heart. 2018 Feb;104(3):192-200. doi: 10.1136/heartjnl-2017-311581. PMID: 29030423.

Mayo-Wilson E, Li T, Fusco N, Dickersin K; MUDS investigators. Practical guidance for using multiple data sources in systematic reviews and meta-analyses (with examples from the MUDS study). Res Synth Methods. 2018 Mar;9(1):2-12. doi: 10.1002/jrsm.1277. PMID: 29057573; PMCID: PMC5888128.

Stovold E, Beecher D, Foxlee R, Noel-Storr A. Study flow diagrams in Cochrane systematic review updates: an adapted PRISMA flow diagram. Syst Rev. 2014 May 29;3:54. doi: 10.1186/2046-4053-3-54. PMID: 24886533; PMCID: PMC4046496.

PubReMiner: Herramienta de minería de datos para desarrollar estrategias de búsquedas para revisiones sistemáticas y de alcance

PubReMiner (https://hgserver2.amc.nl/cgi-bin/miner/miner2.cgi) es un interface alternativo para buscar en PubMed, es decir, es un buscador que consulta la base de datos de PubMed de otra forma a la realizada por este motor de búsqueda y presentan los resultados en otro formato. Su principal ventaja es que nos permite analizar datos.

Para utilizarla escribimos nuestra búsqueda en la ventana de búsqueda y obtenemos el resultado en forma de tabla de frecuencias. Marcando en los recuadros nosotros podemos agregar o excluir términos a la consulta para optimizar los resultados.

De esta forma, con PubReMiner nos informa de las palabras que se utilizan con más frecuencia y nos proporciona una forma rápida de recopilar información adicional sobre el tema.

Las columnas que podemos visualizar y personalizar en la tabla de frecuencia son las siguientes:

  1. Año de publicación.
  2. Las revistas en las que más se publica su consulta.
  3. Los autores más activos en el campo de su consulta.
  4. Las palabras que más se han utilizado en el título y resumen de los artículos.
  5. Los campos de encabezamiento MESH (incluidos subencabezamientos).
  6. Supplementary Concept (Substances).
  7. Tipo de publicación.

Si por alguna razón deseamos adaptar nuestra consulta de una manera diferente a la que permite PubReMiner, podemos modificar la consulta de la forma que deseemos y presionar “Search with Manual Adjustment”. Una vez que hemos terminado con nuestra estrategia podemos pasar a ver los resultados en PubMed desde el botón “goto pubmed with query”.

PubReMiner nos ayuda a encontrar información relevante mediante sugerencias de palabras. Además de generar consultas eficientes, también puede ser útil en otras áreas como:

  • Seleccionar una revista para enviar nuestro manuscrito al mostrarnos en la tabla las revistas de investigación similar más frecuentes;
  • Encontrar expertos en un área de investigación al mostrarnos los autores que con mayor frecuencia publican del tema de nuestra consulta;
  • Si buscamos por un autor, encontramos los temas de interés de investigación de este al ver las palabras clave asociadas con ese autor;
  • Análisis bibliométricos de lo publicado sobre el tema de nuestra consulta;
  • Conviertir los resultados (todas nuestras publicaciones) en un CV en tiempo real con “Create CV output”

Por último, indicaros que podéis encontraros diferentes formas de llamar a esta herramienta como: PubReMiner, pubmed reminer, pub reminer, pubmed re-miner.

MeSH on Demand: Herramienta de minería de datos para desarrollar estrategias de búsquedas para revisiones sistemáticas y de alcance

Identificar y seleccionar palabras clave y términos indexados apropiados es crucial para desarrollar estrategias de búsqueda sólidas para ubicar estudios para revisiones sistemáticas y de alcance.

Una herramienta de minería de texto útil es MeSH on Demand https://meshb.nlm.nih.gov/MeSHonDemand. Esta es una herramienta de software que analiza el texto y lo compara con los datos de PubMed para generar MeSH (Medical Subject Headings).

¿Qué tenemos que hacer?

Simplemente copiamos y pegamos el texto de un protocolo de revisión sistemática o una propuesta de investigación en la herramienta MeSH on Demand. Esta nos sugiere encabezados de materia MeSH y enumera 10 artículos basados en el texto ingresado.

Recomendación: Al seleccionar el texto para ingresar en MeSH on Demand, es importante que incluya los puntos clave y las palabras importantes. Por lo general, recomiendo incluir la pregunta de investigación y la información básica clave para el tema de revisión.

Revisión rápida: Recomendaciones

Dada la situación de pandemia actual, la necesidad de evidencia es más urgente, lo que hace que las revisiones rápidas sean una opción muy popular. Un ejemplo es el de Public Health Scotland cuyo objetivo es proporcionar una revisión rápida de la base de evidencia científica para informar las medidas de prevención y control de infecciones necesarias para la prevención y el tratamiento de COVID-19 en entornos de atención y salud. (Rapid Review of the literature: Assessing the infection prevention and control measures for the prevention and management of COVID-19 in healthcare settings)

Una revisión rápida utiliza atajos en el proceso de revisión sistemática, pero ha de ser rigurosa y debe hacer una pregunta muy enfocada. También puede tener utilidad en las actualizaciones de revisiones existentes que incorporen datos publicados desde la revisión anterior. 

Recientemente, la Cochrane Rapid Reviews Method Group ha publicado un artículo con recomendaciones de metodología para realizar revisiones rápidas (Garritty C et al.). Estas recomendaciones, traducidas, dicen lo siguiente:

Recomendación 1: Establecimiento de la pregunta de investigación: refinamiento del tema

  • Involucrar a las partes interesadas clave (p. ej., usuarios de la revisión como consumidores, profesionales de la salud, formuladores de políticas, tomadores de decisiones) para establecer y perfeccionar la pregunta de revisión, los criterios de elegibilidad y los resultados de interés. Consulte con las partes interesadas durante todo el proceso para asegurarse de que la pregunta de investigación sea adecuada para el propósito y con respecto a cualquier cambio ad-hoc que pueda ocurrir a medida que avanza la revisión. (R1)
  • Desarrolle un protocolo que incluya preguntas de revisión, pregunta estructurada (p. ej.: PICOs) y criterios de inclusión y exclusión.

Recomendaciones 2-9 Establecer criterios de elegibilidad

Junto con las partes interesadas clave:

Defina claramente la población, la intervención, el comparador y los resultados.

  • Limitar el número de intervenciones (R2) y comparadores (R3).
  • Limite el número de resultados, centrándose en los más importantes para la toma de decisiones. (R4)

Considere las restricciones de fechas con una justificación clínica o metodológica. (R5)

El establecimiento de restricciones es apropiado con una justificación proporcionada. (R6)

Limite el idioma de publicación al inglés; agregue otros idiomas solo si está justificado por la temática. (R7)

Las revisiones sistemáticas (RS) deben considerarse un diseño de estudio relevante para su inclusión. (R8)

Poner énfasis en diseños de estudios de mayor calidad (por ejemplo, RS o RCT); considere un enfoque gradual para la inclusión del diseño del estudio. (R9)

Recomendaciones 10-13: Búsqueda

  • Involucre a un especialista en información.
  • Limite la búsqueda en la base de datos principal a CENTRAL, MEDLINE (por ejemplo, a través de PubMed) y Embase (si tiene acceso disponible). (R10)
  • Se recomienda la búsqueda en bases de datos especializadas (por ejemplo, PsycInfo y CINAHL) para ciertos temas, pero debe restringirse a 1 o 2 fuentes adicionales, u omitirse si el tiempo y los recursos son limitados. (R11)
  • Considere la revisión por pares de al menos una estrategia de búsqueda (p. ej., MEDLINE). (R12)
  • Limite la búsqueda de literatura gris y las búsquedas complementarias (R13). Si está justificado, buscar registros de estudios y escanear las listas de referencias de otras RS o estudios incluidos después de la selección de los resúmenes y textos completos.

Recomendaciones 14-15: Selección de estudios

Selección de títulos y resúmenes

  • Utilizando un formulario de título y resumen estandarizado, realice una prueba piloto utilizando los mismos 30 a 50 resúmenes para que todo el equipo de selección evalúe y compruebe el formulario de revisión.
  • Utilice dos revisores para la selección dual de al menos el 20% (idealmente más) de los resúmenes, con resolución de conflictos.
  • Utilice un revisor para seleccionar los resúmenes restantes y un segundo revisor para seleccionar todos los resúmenes excluidos y, si es necesario, resolver los conflictos. (R14)

Cribado del texto completo

  • Utilizando un formulario de texto completo estandarizado, realice una prueba piloto utilizando los mismos 5 a 10 artículos de texto completo para que todo el equipo de selección evalúe y compruebe el formulario de revisión.
  • Utilice un revisor para filtrar todos los artículos de texto completo incluidos y un segundo revisor para filtrar todos los artículos de texto completo excluidos. (R15)

Recomendaciones 16-18: Extracción de datos

  • Utilice un solo revisor para extraer datos mediante un formulario piloto. Utilice un segundo revisor para verificar la exactitud e integridad de los datos extraídos. (R16)
  • Limite la extracción de datos a un conjunto mínimo de elementos de datos requeridos. (R17)
  • Considere el uso de datos de RS existentes para reducir el tiempo dedicado a la extracción de datos. (R18)

Recomendaciones: 19-20: Evaluación del riesgo de sesgo

  • Utilice una herramienta válida de riesgo de sesgo (p. ej.: RoB), si está disponible, para los diseños de estudio incluidos. 
  • Utilice un solo revisor para calificar el riesgo de sesgo, con la verificación completa de todos los juicios (y declaraciones de apoyo) por parte de un segundo revisor. (R19)
  • Limite las calificaciones de riesgo de sesgo a los resultados más importantes, con un enfoque en los más importantes para la toma de decisiones. (R20)

Recomendaciones 21-22: Síntesis

  • Sintetice la evidencia de forma narrativa.
  • Considere un metanálisis solo si es apropiado (es decir, los estudios son lo suficientemente similares como para agruparlos). (R21) Los estándares para realizar un metanálisis para una RS se aplican igualmente a una RR. 
  • Utilice un solo revisor para calificar la certeza de la evidencia, con la verificación de todos los juicios (y los fundamentos en notas al pie) por un segundo revisor. (R22)

Recomendaciones 23-26: Otras consideraciones para los RR Cochrane

Los RR deben ir precedidos de un protocolo presentado y aprobado por Cochrane (R23); el protocolo debe publicarse (por ejemplo, PROSPERO o en Open Science Framework) (R24); permitir cambios post hoc en el protocolo (criterios de elegibilidad, etc.) como parte de un proceso eficiente e iterativo (R25); documentar todos los cambios post hoc; e incorporar el uso de software para SR en línea (p. ej.: Covidence, DistillerSR y EPPI-Reviewer) para agilizar el proceso (R26).

BIBLIOGRAFÍA

Garritty C, Gartlehner G, Nussbaumer-Streit B, King VJ, Hamel C, Kamel C, Affengruber L, Stevens A. Cochrane Rapid Reviews Methods Group offers evidence-informed guidance to conduct rapid reviews. J Clin Epidemiol. 2021 Feb;130:13-22. doi: 10.1016/j.jclinepi.2020.10.007. PMID: 33068715; PMCID: PMC7557165.)

Guías, manuales y estándares para hacer y para reportar una revisión sistemática

En una entrada anterior daba cuenta de la actualización de la Declaración PRISMA Statements 2020. Hoy quiero comentaros la interesante entrada “Sobre el uso y mal uso de @PRISMAStatement https://rafabravo.blog/2021/04/22/sobre-el-uso-y-mal-uso-de-prisma/…

Y para mayor comodidad en su uso, en el blog de Rafa Bravo @PrimunNocere, se puede descargar la versión traducida al español aquí.

En esta entrada de su blog PRIMUM NON NOCERE, Rafa Bravo nos deja claro que la declaración @PRISMAStatement 2020 no es una guía para la realización de revisiones sistemáticas y tampoco debe utilizarse para evaluar la calidad metodológica de estas.

Además, la Declaración PRISMA no tiene la intención de aconsejar sobre la publicación de protocolos de Revisiones Sistemáticas, para los cuales se encuentra disponible una extensión separada: PRISMA for Protocols (PRISMA-P) 2015 Statement.

El número de revisiones sistemáticas (RS) ha aumentado sustancialmente durante los últimos 20 años, sin embargo, muchas RS continúan realizándose y notificándose de manera deficiente, y todavía es común ver artículos que usan la Declaración PRISMA y otras pautas de presentación de informes de manera inapropiada. La Declaración PRISMA y sus extensiones son un conjunto mínimo de recomendaciones basadas en la evidencia, diseñadas principalmente para fomentar la presentación de informes transparentes y completos de los RS. Es decir, es una hoja de ruta para ayudar a los autores a describir mejor lo que se hizo, lo que se encontró y, en el caso de un protocolo de revisión, lo que planean hacer ( Sarkis-Onofre R).

Pero no es infrecuente leer en los manuscritos de las revisiones sistemáticas las siguientes frases: “Esta revisión de alcance se llevará a cabo de acuerdo con los elementos de la Declaración PRISMA-ScR”. O “Este protocolo se diseñó basándose en la Declaración PRISMA-P”.

Por lo tanto, hay que distinguir entre realizar (“conduct”) e informar (“report”) una #RevisiónSistemática u otro documento de síntesis de la evidencia. Aquí dejo diferentes guías, manuales y estándares:

Por lo tanto, lo adecuado en el informe de nuestra revisión podemos indicar:

  • “El informe de esta revisión sistemática se guio por los estándares dPRISMA”.
  • “Esta revisión de alcance se informó de acuerdo con los elementos de la extensión PRISMA-ScR”.
  • “El protocolo se informa de acuerdo con PRISMA-P”.

BIBLIOGRAFÍA:

Bravo R. Sobre el uso y mal uso de PRISMA [Internet]. Primum non nocere 2021; 2021 [consultado 27 de abril 2021]. Disponible en: https://rafabravo.blog/2021/04/22/sobre-el-uso-y-mal-uso-de-prisma/

Sarkis-Onofre R, Catalá-López F, Aromataris E, Lockwood C. How to properly use the PRISMA Statement. Syst Rev. 2021 Apr 19;10(1):117. doi: 10.1186/s13643-021-01671-z. PMID: 33875004; PMCID: PMC8056687. Disponible en: https://systematicreviewsjournal.biomedcentral.com/articles/10.1186/s13643-021-01671-z

Actualización de la guía para la presentación de informes de revisiones sistemáticas: desarrollo de la declaración PRISMA 2020

En 2009, un grupo internacional presentó la declaración PRISMA (Preferred Reporting Items for Systematic Reviews and Meta-Analyzes), una guía diseñada para ayudar a los autores a preparar un informe completo de su revisión sistemática. Incluía 27 elementos de la lista de verificación que representan un conjunto mínimo de información para transmitir en un informe de revisión sistemática.

Ya han pasado suficiente tiempo para considerar que es el momento de actualizar la declaración de @PRISMAStatement 2009. 3 items a modificar son relativos a la búsqueda. J Clin Epidemiol. 2021. DOI: 10.1016/j.jclinepi.2021.02.003.

Para actualizar PRISMA 2009, Matthew J Page y cols., revisaron la bibliografía y analizaron 60 documentos con orientación sobre informes para revisiones sistemáticas a fin de generar modificaciones a la declaración PRISMA 2009. Además, invitaron a 220 metodólogos de revisión sistemática y editores de revistas a completar una encuesta sobre las modificaciones sugeridas. En septiembre de 2018 se celebró una reunión presencial de dos días en Edimburgo, para discutir el contenido del borrador y la redacción de la declaración PRISMA actualizada. Después redactaron el borrador de la declaración PRISMA 2020 y la perfeccionaron en función de los comentarios. https://osf.io/p93ge/

PRISMA 2020 está diseñado para uso en #RevisionesSistemáticas con o sin #metanálisis, y principalmente para revisiones que evalúan los efectos de las intervenciones, pero muchos elementos se aplican a revisiones con otros objetivos.

El resultado ha sido la recomendación de mantener 6  elementos de la lista de verificación original tal como estaban y modificar 15 de ellos utilizando la redacción sugerida.

PRISMA 2020 incluye orientación sobre cómo informar todas las secciones: objetivos, criterios de elegibilidad, búsqueda, selección de estudios, recopilación de datos, evaluación del riesgo de sesgo, síntesis, resultados, discusión y declaraciones.

En comparación con la declaración original, PRISMA 2020 incluye nuevos elementos sobre la evaluación de la certeza en el cuerpo de la evidencia, los intereses de los revisores y la disponibilidad de datos, códigos y otros materiales. También proporciona una guía novedosa sobre cómo informar del uso de herramientas de automatización en varios pasos del proceso de revisión, como la búsqueda, la selección de estudios y la recopilación de datos.

Las modificaciones relativas al proceso de búsqueda de estudios y su comparación con PRISMA 2009 son las siguientes:

ItemPRISMA 2009 checklist itemItem Prisma 2020 checklist item
MÉTODOS
7Describa todas las fuentes de información (por ejemplo, bases de datos con fechas de cobertura, contacto con los autores de los estudios para identificar estudios adicionales) en la búsqueda y la fecha de la última búsqueda.6Especifique todas las bases de datos, registros, sitios web, organizaciones, listas de referencias y otras fuentes buscadas o consultadas para identificar estudios. Especifique la fecha de la última búsqueda o consulta de cada fuente.
8Presente una estrategia de búsqueda electrónica completa para al menos una base de datos, incluidos los límites utilizados, de modo que pueda repetirse.7Presente las estrategias de búsqueda completas para todas las bases de datos, registros y sitios web, incluidos los filtros y límites utilizados.
RESULTADOS
17Proporcione el número de estudios seleccionados, evaluados para la elegibilidad e incluidos en la revisión, con los motivos de las exclusiones en cada etapa, idealmente con un diagrama de flujo16aDescriba los resultados del proceso de búsqueda y selección, desde el número de registros identificados en la búsqueda hasta el número de estudios incluidos en la revisión, idealmente utilizando un diagrama de flujo.
Modificaciones relativas al proceso de búsqueda de estudios y su comparación con PRISMA 2009

En comparación con la declaración original, PRISMA 2020 incluye nuevos elementos. En este enlace tenéis ejemplos de cómo reportar cada ítem https://www.bmj.com/highwire/filestream/1045546/field_highwire_adjunct_files/0/pagm061901.w1.pdf

También tenéis disponible el checklist aquí: https://prisma.shinyapps.io/checklist/

También han modificado la plantilla de diagrama de flujo PRISMA para incorporar una guía actualizada sobre cómo informar los resultados del proceso de búsqueda y selección, y proporcionar plantillas específicas para revisiones sistemáticas originales y revisiones sistemáticas actualizadas.

Los diagramas de flujo de PRISMA 2020 se pueden generar utilizando una aplicación Shiny desarrollada por @nealhaddaway disponible en https://www.eshackathon.org/software/PRISMA2020.html

Hay que recordar, que hay desarrollada una extensión de PRISMA para el proceso de búsqueda, PRISMA-S que complementa la Declaración de PRISMA proporcionando una lista de verificación para ser utilizada por autores, editores y revisores para verificar que cada componente de una búsqueda esté completamente informado y, por lo tanto, sea reproducible.

El documento de explicación y elaboración de PRISMA 2020 en @bmj_latest explica por qué se recomienda informar de cada elemento, presenta viñetas que detallan las recomendaciones y ejemplos de las revisiones publicadas (1).

El documento de desarrollo PRISMA 2020 en @JClinEpi describe los pasos tomados para actualizar la declaración PRISMA 2009 y proporciona la justificación para las modificaciones a los elementos originales (2).

Hay programado un interesante seminario web sobre la declaración PRISMA 2020: [Apr 28] TI Methods Speaker Series: The PRISMA 2020 Statement https://www.ti.ubc.ca/2021/03/23/apr-28-prisma-2020-statement/

BIBLIOGRAFÍA

  1. Page MJ, Moher D, Bossuyt PM, Boutron I, Hoffmann TC, Mulrow CD, Shamseer L, Tetzlaff JM, Akl EA, Brennan SE, Chou R, Glanville J, Grimshaw JM, Hróbjartsson A, Lalu MM, Li T, Loder EW, Mayo-Wilson E, McDonald S, McGuinness LA, Stewart LA, Thomas J, Tricco AC, Welch VA, Whiting P, McKenzie JE. PRISMA 2020 explanation and elaboration: updated guidance and exemplars for reporting systematic reviews. BMJ. 2021 Mar 29;372:n160. doi: 10.1136/bmj.n160. PMID: 33781993.
  2. Matthew J Page, Joanne E McKenzie, Patrick M Bossuyt, Isabelle Boutron, Tammy C Hoffmann, Cynthia D Mulrow, Larissa Shamseer, Jennifer M Tetzlaff, David Moher, Updating guidance for reporting systematic reviews: development of the PRISMA 2020 statement, J Clin Epidemiol. 2021;134:103-112. https://doi.org/10.1016/j.jclinepi.2021.02.003. Disponible en: (https://www.sciencedirect.com/science/article/pii/S0895435621000408)
  3. Rethlefsen ML, Kirtley S, Waffenschmidt S, Ayala AP, Moher D, Page MJ, Koffel JB; PRISMA-S Group. PRISMA-S: an extension to the PRISMA Statement for Reporting Literature Searches in Systematic Reviews. Syst Rev. 2021 Jan 26;10(1):39. doi: 10.1186/s13643-020-01542-z. PMID: 33499930; PMCID: PMC7839230.

¿Conoces la herramienta para decidir que tipo de revisión es la más adecuada?: What Review is Right for You?

Por mi experiencia, la mayoría de las personas que desean realizar una síntesis de la evidencia piensan únicamente en la posibilidad de realizar una revisión sistemática, cuando a veces esta no es la mejor de las opciones.

La revisión sistemática es el “estándar de oro” de las revisiones, pero dentro de la familia de revisiones podemos diferenciar varios tipos llegándose a identificar 20 o más métodos únicos (Sutton y cols. 2019, Tricco y cols 2018 y 2016, Grant y cols. 2019).

La selección del método de síntesis específico a utilizar debe basarse en la pregunta que los autores buscan responder. Será más apropiado seguir un método diferente según la pregunta y los objetivos. 

Para ayudarnos a tomar la decisión adecuada, disponemos de una herramienta en línea (https://whatreviewisrightforyou.knowledgetranslation.net/) (Munn y cols. 2018). Está diseñada para proporcionar orientación y material de apoyo sobre los métodos para la realización y presentación de informes de síntesis de conocimientos. Como proyecto piloto, la versión actual de la herramienta solo identifica métodos para la síntesis de conocimientos de estudios cuantitativos aunque sus autores tienen pensado desarrollar una herramienta para la síntesis de evidencia cualitativa.

https://whatreviewisrightforyou.knowledgetranslation.net/

BIBLIOGRAFÍA

Grant MJ, Booth A. Atypology of reviews: an analysis of 14 review types and associated methodologies. Health Info Libr J. 2009 Jun;26(2):91-108. doi: 10.1111/j.1471-1842.2009.00848.x. PMID: 19490148. Disponible en: https://onlinelibrary.wiley.com/doi/full/10.1111/j.1471-1842.2009.00848.x

Munn Z, Stern C, Aromataris E, Lockwood C, Jordan Z. What kind of systematic review should I conduct? A proposed typology and guidance for systematic reviewers in the medical and health sciences. BMC Med Res Methodol. 2018 Jan 10;18(1):5. doi: 10.1186/s12874-017-0468-4. PMID: 29316881; PMCID: PMC5761190. Disponible en:  https://bmcmedresmethodol.biomedcentral.com/articles/10.1186/s12874-017-0468-4

Sutton A, Clowes M, Preston L, Booth A. Meeting the review family: exploring review types and associated information retrieval requirements. Health Info Libr J. 2019 Sep;36(3):202-222. doi: 10.1111/hir.12276. PMID: 31541534.

Tricco AC, Soobiah C, Antony J, Cogo E, MacDonald H, Lillie E, Tran J, D’Souza J, Hui W, Perrier L, Welch V, Horsley T, Straus SE, Kastner M. A scoping review identifies multiple emerging knowledge synthesis methods, but few studies operationalize the method. J Clin Epidemiol. 2016 May;73:19-28. doi: 10.1016/j.jclinepi.2015.08.030. PMID: 26891949.

Tricco AC, Zarin W, Ghassemi M, Nincic V, Lillie E, Page MJ, Shamseer L, Antony J, Rios P, Hwee J, Veroniki AA, Moher D, Hartling L, Pham B, Straus SE. Same family, different species: methodological conduct and quality varies according to purpose for five types of knowledge synthesis. J Clin Epidemiol. 2018 Apr;96:133-142. doi: 10.1016/j.jclinepi.2017.10.014. PMID: 29103958.

Novedades de la Cochrane Library: 2/5 Búsqueda por PICO

Siguiendo con las novedades de la Cochrane Library vamos ahora a ver en detalle un cambio que ya avancé en este blog el anuncio de la Cochrane del lanzamiento beta de una nueva herramienta para encontrar revisiones en la Biblioteca Cochrane: Búsqueda PICO beta. Actualmente, busca en la mayoría de las revisiones de intervenciones Cochrane publicadas desde 2015 (se pueden buscar más de 5000 revisiones).

PICO (Población/Paciente, Intervención, Comparación y Resultado o Outcome) se usa en la atención médica basada en evidencia para formular preguntas y desarrollar estrategias de búsqueda.

Para buscar por PICO lo primero que tenemos que hacer es entrar en “Búsqueda avanzada” y luego hacer click en la pestaña “PICO Search”.

Cómo buscar por PICO

Si estamos buscando sobre personas que tienen COVID-19 y están tomando hidrocloroquina o cloroquina: 

  • Escriba “COVID-19” en el cuadro de búsqueda y seleccione el término de vocabulario PICO del menú desplegable.
  • Mantener la selección del botón de opción predeterminado como “Population”.
  • Haga clic en “+” para agregar otra línea y seleccione “OR”.
  • Escriba “Coronavirus” en el cuadro de búsqueda y seleccione el término del vocabulario PICO “Coronavirus Infection” en el menú desplegable.
  • Mantener la selección del botón de opción predeterminado como “Población”.
  • Haga clic en “+” para agregar otra línea y seleccione “AND”
  • Escriba “Hydroxychloroquine” en el cuadro de búsqueda y seleccione el término de vocabulario PICO del menú desplegable.
  • Mantenga el botón de opción predeterminado como “Intervención”.
  • Haga clic en “+” para agregar otra línea y seleccione “OR”.
  • Escriba “Chloroquine” en el cuadro de búsqueda y seleccione el término del vocabulario PICO en el menú desplegable.
  • Haga clic en “Run Search”.

Para buscar por PICO en la Cochrane Library lo primero que tenemos que hacer es entrar en “Advanced Search” y hacer clic en la pestaña “PICO Search”. En esta presentación vemos los pasos de la búsqueda https://view.genial.ly/5faa4eb8f74fca0d216d8232

Refinando los resultados de la búsqueda

Una vez nos aparezca el resultado podemos refinar nuestra búsqueda seleccionando términos de las opciones “Filter your results” en el lado izquierdo de los resultados de búsqueda. Los filtros están organizados en Population, Intervention/Comparison y Outcome. Los filtros también incluyen edades y clasificaciones de intervención o resultado de nivel superior (High-level Outcome Classification).

Opciones de filtrado y visualización de PICO en Cochrane Library

Aquí os dejo el pdf de la presentación “How to use PICO Search”:

https://www.wiley.com/network/cochranelibrarytraining/how-to-use-pico-search

Revisiones sistemáticas: Programas para la extracción de datos de las figuras

Los autores de revisiones sistemáticas necesitan extraer los datos numéricos de los estudios, generalmente de los artículos de revistas, pero en muchas ocasiones estos datos se presentan solo en los gráficos y no están disponibles en otro lugar.

Los autores pueden solicitar los datos a los investigadores de los estudios pero raramente obtienen respuesta. Otra opción es extraer los datos de las figuras y gráficos de forma manual o mediante el uso de software.

Los autores de revisiones sistemáticas necesitan extraer los datos numéricos de los estudios pero en muchas ocasiones estos se presentan solo en los gráficos. En estos casos la extracción puede hacerse de forma manual o mediante el uso de software. #SysRev

El uso de programas para este fin es más conveniente, rápido y preciso que la estimación manual (1-2). Sin embargo, solo el 20.5% de los investigadores usan software para extraer datos de figuras y gráficos (3).

Solo el 20.5% de los autores de las revisiones sistemáticas usan software para extraer datos de figuras y gráficos de los estudios. #SysRev

Para este proceso, hay disponibles herramientas, muchas gratuitas, como las siguientes:

El software funciona tomando una imagen de una figura y luego digitalizando los puntos de datos fuera de la figura usando los ejes y escalas establecidos por los usuarios.

El capítulo 5 del Manual Cochrane y los nuevos estándares metodológicos para las revisiones sistemáticas Cochrane indican que la metodología para la extracción de datos debe indicarse (6). Sin embargo, solo el 5.6% de los protocolos Cochrane mencionó en la sección de Métodos cómo se realizará la extracción de datos de las cifras (7).

El capítulo 5 del Manual Cochrane para las revisiones sistemáticas Cochrane indican que la metodología para la extracción de datos debe indicarse. #SysRev

Bibliografía

  1. Gross A, Schirm S, Scholz M. Ycasd – a tool for capturing and scaling data from graphical representations. BMC Bioinformatics. 2014 Jun 25;15:219. doi: 10.1186/1471-2105-15-219. PMID: 24965054; PMCID: PMC4085079.
  2. Jelicic Kadic A, Vucic K, Dosenovic S, Sapunar D, Puljak L. Extracting data from figures with software was faster, with higher interrater reliability than manual extraction. J Clin Epidemiol. 2016 Jun;74:119-23. doi: 10.1016/j.jclinepi.2016.01.002. Epub 2016 Jan 11. PMID: 26780258.
  3. Giang HTN, Ahmed AM, Fala RY, Khattab MM, Othman MHA, Abdelrahman SAM, Thao LP, Gabl AEAE, Elrashedy SA, Lee PN, Hirayama K, Salem H, Huy NT. Methodological steps used by authors of systematic reviews and meta-analyses of clinical trials: a cross-sectional study. BMC Med Res Methodol. 2019 Jul 26;19(1):164. doi: 10.1186/s12874-019-0780-2. PMID: 31349805; PMCID: PMC6659247.
  4. Gheibi S, Mahmoodzadeh A, Kashfi K, Jeddi S, Ghasemi A. Data Extraction from Graphs Using Adobe Photoshop: Applications for Meta-Analyses. Int J Endocrinol Metab. 2019 Oct 8;17(4):e95216. doi: 10.5812/ijem.95216. PMID: 31998381; PMCID: PMC6942170.
  5. Shadish WR, Brasil ICC, Illingworth DA, White KD, Galindo R, Nagler ED, Rindskopf DM. Using UnGraph to extract data from image files: verification of reliability and validity. Behav Res Methods. 2009 Feb;41(1):177-183. doi: 10.3758/BRM.41.1.177. PMID: 19182138.
  6. Higgins JPT, Thomas J, Chandler J, Cumpston M, Li T, Page MJ, Welch VA (editors). Cochrane Handbook for Systematic Reviews of Interventions version 6.0 (updated July 2019). Cochrane, 2019. Available from http://www.training.cochrane.org/handbook.
  7. Vucic K, Jelicic Kadic A, Puljak L. Survey of Cochrane protocols found methods for data extraction from figures not mentioned or unclear. J Clin Epidemiol. 2015 Oct;68(10):1161-4. doi: 10.1016/j.jclinepi.2014.11.016. Epub 2014 Dec 18. PMID: 25577327.

Nueva versión de la guía EUnetHTA del proceso de búsqueda de información en revisiones sistemáticas y evaluación de tecnología

EUnetHTA

Ya en 2015 daba cuenta de la Guía metodológica EUnetHTA desarrollada por el Institute for Quality and Efficiency in Health Care (IQWiG) / Germany y cuyo objetivo es proporcionar una visión general, actualizada y transparente de todo el proceso de recuperación de la información.

Ahora está disponible la versión 2.0 de diciembre de 2019 de la directriz metodológica EUnetHTA sobre “Proceso de recuperación de información para revisiones sistemáticas y evaluaciones de tecnología de salud sobre efectividad clínica” actualizada por IQWiG junto con el NIPH (Noruega) y AETSA (España).

Podéis descargar esta nueva versión en:

https://eunethta.eu/wp-content/uploads/2020/01/EUnetHTA_Guideline_Information_Retrieval_v2-0.pdf

Citar como:

EUnetHTA JA3WP6B2-2 Authoring Team. Process of information retrieval for systematic
reviews and health technology assessments on clinical effectiveness. Methodological
Guidelines. Diemen (The Netherlands): EUnetHTA; 2019. Available from
https://www.eunethta.eu/

Características de las revisiones sistemáticas

En anteriores entradas he hablado de las 10 etapas para la realización de las revisiones sistemáticas, de los diferentes tipos de revisiones dentro de la familia de las revisiones, de cuánto tiempo y personas son necesarias para realizar una revisión sistemática, de manuales para su realización como la nueva edición de la Cochrane Handobook for Systematic Reviews of Interventions, de los pasos para la búsqueda de información en una revisión sistemática (parte I) y (parte II), de qué son los filtros de búsqueda y mucho más. Incluso has podido encontrar un pequeño juego para ver lo que sabes de revisiones sistemáticas.

Hoy incluyo una pequeña presentación con las principales características de las revisiones sistemáticas que espero os guste.

¿Estás pensado realizar un Revisión Sistemática?

A la hora de planificar una revisión sistemática, has de tener en cuenta dos cuestiones fundamentales. La primera es quién va a formar parte del equipo de autores. Las revisiones deben ser realizadas por más de una persona. Los autores deben establecer un equipo con la experiencia y los conocimientos adecuados tanto en el tema de la revisión como en los métodos de revisión sistemática. Los especialistas metodológicos, como los estadísticos y los especialistas en información, deben incluirse como autores cuando cumplen con los criterios de ICMJE.

En segundo lugar, los autores han de tener en cuenta los recursos necesarios, de entre los cuales el más importante es el tiempo. La cantidad de tiempo requerida es muy variable y dependerá del tema de la revisión, el número de estudios que haya que manejar, los métodos utilizados y la experiencia de los autores.

Por último te aconsejo que consultes SR Tool Box. Es un catálogo web de herramientas para diversas tareas dentro del proceso de realización de una revisión sistemática y síntesis de evidencia como es el software, guías y estándares y listas de verificación de calidad, etc.

SR Tool Box

Se puede realizar una búsqueda simple por palabra clave (Quick Search) y una búsqueda más detallada (Advanced Search) que permite seleccionar varios criterios para encontrar tipos específicos de herramientas y enviar nuevas herramientas a la base de datos.

Más información en: Cumpston M, Chandler J. Chapter II: Planning a Cochrane Review. In: Higgins JPT, Thomas J, Chandler J, Cumpston M, Li T, Page MJ, Welch VA (editors). Cochrane Handbook for Systematic Reviews of Interventions version 6.0 (updated August 2019). Cochrane, 2019. Available from www.training.cochrane.org/handbook

Qué sabes de revisiones sistemáticas, ¿juegas?

En la entrada del pasado 10 de julio Las 10 etapas del proceso de revisiones sistemáticas os presentaba una infografía interactiva sobre las diferentes etapas de una revisión sistemática.

Hoy os propongo un juego sencillo para que comprobéis cuál es vuestro conocimiento de algunas de estas fases. Espero que os guste.