Este artículo, el segundo de la serie de revisiones sistemáticas, se centra en lo que debería ser el segundo paso: cómo identificar y seleccionar los estudios relevantes para la revisión planificada. La búsqueda bibliográfica, en la que se emplean términos relacionados con la pregunta formulada en el primer paso, habrá de ser exhaustiva y amplia. Es importante establecer criterios de selección para incluir los estudios relevantes y descartar aquellos que no responden a la pregunta formulada. Detalles como ampliar el espectro de bases de datos consultadas, evitar restringir las búsquedas a un solo idioma, gestionar correctamente las referencias y registrar las decisiones tomadas durante todo el proceso son factores ganadores para que la identificación de estudios sea satisfactoria.
This article focuses on the second step of a systematic review, i.e. how to identify relevant studies for the planned review. The search, using terms related to the questions framed in the previous step, should be comprehensive. However, it is important to establish selection criteria to include relevant studies and to exclude those that might present a risk of bias at this stage. Details such as broadening the spectrum of electronic databases consulted, avoiding restricting searches to a single language, managing references correctly, and recording decisions made throughout the process are winning factors for successful study identification.
Para realizar una revisión sistemática es crucial la exhaustividad con que se identifican los estudios que pueden ser relevantes. Suele ser complicado reproducir exactamente las búsquedas realizadas en revisiones previamente publicadas, las estrategias de búsqueda aparecen en la metodología de forma excesivamente resumida o de manera poco explícita1. Para identificar correctamente los estudios que deben ser evaluados en una revisión sistemática es necesario seguir una metodología rigurosa2. En primer lugar, se deben identificar las referencias de los estudios potencialmente adecuados, definiendo la estrategia de búsqueda y utilizando recursos como bases de datos electrónicas o listas bibliográficas de artículos originales o de revisión. En segundo lugar, hay que examinar la lista de referencias generada en el paso anterior, con el objetivo de establecer si son pertinentes o no, en función de la pregunta formulada en el primer paso de la revisión sistemática (ver primer artículo de esta serie)3. De esta manera se decidirá si es preciso obtener los manuscritos íntegros. En tercer lugar, habrá que examinar cuidadosamente el texto completo de cada uno de los artículos previamente seleccionados, y valorar si cumplen o no los criterios de inclusión o exclusión establecidos4,5. En la tabla 1 se incluye un breve glosario en el que se definen los términos específicos relacionados con las búsquedas.
Glosario sobre términos del segundo paso en una revisión sistemática
| Término | Definición |
|---|---|
| MeSH | Medical Subject Heading, por sus siglas en inglés. Se trata de un término controlado utilizado en bases de datos como Medline o PubMed para indexar las citas. Otras bases de datos bibliográficas electrónicas también utilizan a menudo términos similares al MeSH. |
| Sensibilidad de la búsqueda | Proporción de los estudios relevantes identificados mediante una estrategia de búsqueda. Describe la exhaustividad de la estrategia, es decir, su capacidad de todos los estudios pertinentes sobre un tema. Las estrategias muy sensibles suelen tener niveles muy bajos de especificidad (precisión) y viceversa. |
| Precisión de la búsqueda | Proporción de los estudios relevantes identificados mediante una estrategia de búsqueda. Se expresa como un porcentaje de todos los estudios (relevantes e irrelevantes) identificados por ese método. Describe la capacidad de una búsqueda para excluir estudios que no sean relevantes. |
| Lógica booleana | Relación lógica entre los términos de la búsqueda. |
| Operador booleano | AND, OR y NOT son operadores booleanos utilizados en las búsquedas bibliográficas para incluir o excluir ciertas citas en las bases de datos electrónicas. Se utilizan, asimismo, en motores de búsquedas de Internet. |
| Sesgo de publicación | Surge cuando la importancia de los resultados de un estudio afecta a la probabilidad de que sea publicado. |
| Indexación | Consiste en ordenar una serie de registros gracias a la creación de múltiples campos que ayudan a recuperar un documento al efectuar una búsqueda. |
| Criterios inclusión/exclusión | Se basan en la decisión tomada a la hora de seleccionar los estudios, identificados en la búsqueda bibliográfica, que sean relevantes para la revisión. |
El objetivo de las búsquedas iniciales, tanto manuales como electrónicas, es obtener una lista de referencias lo más exhaustiva posible para abordar la pregunta formulada al inicio de la revisión (fig. 1). Es por eso que la estrategia de búsqueda, es decir, los términos empleados y el modo de combinarlos, las bases de datos consultadas y la recuperación de las referencias, varían en función de los componentes de la pregunta6,7.
No existe una base de datos que abarque todas las revistas de salud. Por ello, se suele optar por buscar en varias bases de datos. Sin embargo, ¿cómo es posible tomar decisiones acerca de la cobertura que deben proporcionar las bases de datos seleccionadas? Todo depende del tema de la revisión. La mayoría de los revisores incluyen búsquedas en bases de datos como Medline o Embase. Para controlar el sesgo de publicación se debe tener presente que Medline tiene una preferencia por estudios de procedencia norteamericana, mientras que Embase tiende a decantarse por revistas europeas. Por otro lado, dado que hoy en día una gran parte de las investigaciones se publican en Internet, cabe la posibilidad de complementar la búsqueda en bases de datos con una búsqueda estructurada, utilizando metabuscadores.
Estrategias de búsqueda en bases de datos electrónicasCrear una combinación de términos de búsqueda se basa en utilizar tanto palabras corrientes como términos indexados, como los términos MeSH (Medical Subject Headings, por sus siglas en inglés, https://www.nlm.nih.gov/mesh/meshhome.html), con el objetivo de representar los componentes principales de la pregunta8,9. Para cada componente hay que recopilar una lista de palabras, y una serie de sinónimos que los autores de los estudios puedan haber utilizado. Asimismo, es necesario identificar la lista de términos que los sistemas de indexación puedan haber empleado al registrar las citas. Hay muchas formas de identificar términos MeSH relevantes. Una de ellas es fijarse en las palabras clave de los estudios relacionados que se proporcionan al final del resumen, y observar cómo están indexadas en las bases de datos en las que se pretende realizar la búsqueda. Pueden utilizarse los descriptores en ciencias de la salud (http://decs2020.bvsalud.org/E/homepagee.htm) para identificar correctamente los términos MeSH en inglés. Sean cuales sean los términos escogidos, hay que asegurarse de que la estrategia incluya un número adecuado de palabras corrientes y términos indexados para mejorar la sensibilidad de la búsqueda, con el objetivo de arrojar una amplia red capaz de capturar el mayor número de referencias posible.
La siguiente tarea consiste en combinar las palabras y los términos utilizando operadores booleanos como OR, AND y NOT para mejorar la precisión de la búsqueda. Por ejemplo, si se combina diabetes OR gestacional, aparecerán resultados que contengan uno o ambos términos. Por otro lado, si buscamos diabetes AND gestacional, se obtendrán resultados en los que solamente aparezcan ambos de forma simultánea. La combinación diabetes NOT gestacional encontrará referencias que excluyan el segundo término. Se puede realizar en dos fases, en primer lugar, se utiliza OR para identificar todas las referencias que contienen las palabras y términos que forman cada componente de la pregunta y posteriormente se combinan los términos con AND para seleccionar el conjunto de citas relevantes para todos los componentes.
Ya que cada base de datos utiliza sus propios términos y sistemas de indexación, la estrategia de búsqueda se debe adaptar a cada una de las bases de datos escogida (tabla 2). Existen pruebas sustanciales que indican que limitar la búsqueda a unas pocas bases de datos contribuye a aumentar el sesgo de la revisión. Cuanto más amplia sea la búsqueda, más probabilidades existen de que la revisión produzca respuestas válidas y precisas.
Ejemplo de una búsqueda* en Medline
| Pregunta: En mujeres sometidas a una interrupción quirúrgica del embarazo, ¿la profilaxis antibiótica reduce el riesgo de infección posoperatoria? | |
| Pregunta estructurada (puede no ser necesario utilizar todos los componentes) | |
| Participantes | Mujeres embarazadas sometidas a un aborto quirúrgico |
| Intervención o exposición | Antibióticos usados como profilaxisComparador: placebo o ausencia de intervención (no utilizado en la combinación de términos para la búsqueda) |
| Desenlace | Infección posoperatoria |
| Diseño del estudio | Estudios experimentales (no utilizado en la combinación de términos para la búsqueda) |
| Componentes de la pregunta y términos relevantes | Tipo de términos | Operador booleano | |
|---|---|---|---|
| Texto libre | MeSH | ||
| Participantes: Mujeres embarazadas sometidas a un aborto quirúrgico | |||
| 1 (terminat$ adj3 pregnan$).tw2 (unwant$ adj3 pregnan$).tw3 abortion$.tw4 exp abortion induced/5 exp pregnancy unwanted/6 or/1-5 | XXX | XX | OR (captura los participantes) |
| Intervención o exposición: Antibióticos usados como profilaxis | |||
| 7 exp infection control/8 exp anti-infective agents/9 exp antibiotics/10 antibiotic$.tw11 (antibiotic adj3 prophyla$).tw12 (antimicrobial$ or anti-microbial$).tw13 or/7-12 | XXX | XXX | OR (captura la intervención o exposición) |
| Desenlace: Infección postoperatoria | |||
| 14 exp bacterial infections/15 exp postoperative complications/16 sepsis/17 exp abortion septic/18 exp endometritis/19 exp anexitis/20 (postoperative adj3 (infect$ or contaminat$ or complicat$ or pyrexi$)).tw21 (sepsis or septic).tw22 (bacteria$ adj3 (contaminat$ or infect$)).tw23 (post-abort$ adj3 (infect$ or complicat$ or contaminat$)).tw24 endometritis.tw25 pelvic inflammatory disease.tw26 (septic adj3 abort$).tw27 or/14-2628 and/6,13,27 | XXXXXXX | XXXXXX | OR (captura el desenlace) |
| Comandos y símbolos en Medline | |||
| $ Truncación, p. ej., pregnan$ encontrará pregnant, pregnancy y pregnancies | |||
| adj Búsqueda de proximidad y adyacencia, p. ej., terminant$ adj pregnan$ significa que estos términos aparecen uno junto al otro; terminant$ adj3 pregnan$ significa que puede haber tres palabras entre ambos | |||
| .tw Búsqueda de palabras en el texto, p. ej., abortion$.tw buscará las palabras en el título o en el resumen | |||
| / Búsqueda MeSH, p. ej., abortion induced/ buscará términos MeSH indexados | |||
| exp “Explota” el término MeSH, p. ej., exp abortion induced/ buscará este MeSH y los términos MeSH en el orden más bajo incluidos en el MeSH abortion induced mediante una estructura en árbol. Encontrará términos como abortion eugenic, abortion legal, abortion therapeutic, pregnancy reduction multifetal | |||
El diseño del estudio puede ser de utilidad para mejorar la estrategia de búsqueda10. Por ejemplo, al momento de identificar ensayos clínicos publicados y no publicados se puede efectuar la búsqueda en colecciones como el Registro Cochrane Central de Ensayos Controlados (CENTRAL, por sus siglas en inglés) o la página web clinicaltrials.gov, para registros de ensayos en curso. No obstante, este tipo de colecciones son muy escasas para otros tipos de diseño. En algunas bases de datos se puede filtrar la búsqueda por el diseño. Aunque pueda ser tentador, ya que mejora la precisión de la búsqueda, tiende a reducir la sensibilidad. Un gran número de citas recuperadas serán relevantes, pero muchas otras citas potencialmente relevantes no se identificarán debido a que no están indexadas de forma que el filtro pueda recogerlas.
La indexación incompleta o imprecisa de artículos y revistas en las bases de datos electrónicas requiere la realización de búsquedas en otras fuentes. La revisión de las listas de referencias de los estudios identificados como relevantes proporciona una fuente de citas que puede ser pertinente. Hoy en día, las pruebas de impresión (preprints) aparecen en línea antes de la publicación formal de los trabajos. Las disertaciones y las tesis también constituyen un modo útil de obtener investigaciones sin publicar en revistas científicas. Se pueden buscar a través de bases de datos como Dissertation Abstracts, CINAHL (Cumulative Index to Nursing and Allied Health Literature) o TESEO.
Descargar y gestionar las referenciasPara gestionar eficazmente el proceso de identificación de estudios, las referencias obtenidas a partir de las búsquedas deberán exportarse a un programa de gestión bibliográfica como Mendeley™, EndNote® o Zotero®. En función de la fuente en la que se obtienen las referencias, es posible importarlas automáticamente al programa. En otros casos, hay que registrarlas manualmente, sobre todo cuando se consiguen de una forma que no sea electrónica. Se constituirá una base de datos inicial con todas las referencias obtenidas. Las funciones integradas de los programas de gestión de citas permiten detectar y eliminar fácilmente los duplicados. El gestor de referencias puede y debe añadirse al procesador de textos mediante la instalación de una extensión del programa (plugin) para facilitar la redacción de manuscritos con vistas a su publicación.
Selección de estudios relevantesEl objetivo de esta etapa consiste en utilizar la lista inicial de referencias, una vez eliminadas las duplicadas, para identificar los artículos que, con mayor probabilidad, responden a la pregunta formulada (ver primer artículo)3. Los criterios de selección deben definirse con claridad en función de la pregunta inicial. Al final, solamente se incluirán en la revisión aquellos estudios que cumplan todos los criterios de inclusión y ninguno de exclusión. Para evitar un posible sesgo, estos criterios deben establecerse a priori, mediante las siguientes preguntas: ¿Es sensato agrupar a varios tipos de participantes? ¿Se pueden combinar varias intervenciones? ¿Qué resultados son clínicamente relevantes? ¿Qué diseños de estudio deben incluirse y/o excluirse? Si los criterios se definen de una forma demasiado amplia, la síntesis de los resultados puede ser complicada, mientras que, si se definen de forma muy estricta, la aplicabilidad de las conclusiones puede verse muy restringida. Idealmente, se incluirán los estudios con los diseños más robustos. No obstante, los criterios de selección en cuanto al diseño pueden requerir modificaciones a lo largo del proceso si, después de iniciar la revisión, se toma conciencia del tipo y del número de estudios disponibles. Si los criterios se modifican tras observar los resultados obtenidos en la búsqueda, es muy importante registrarlo de forma explícita y justificarlo adecuadamente.
La lista de referencias obtenida se revisa de acuerdo con los criterios de inclusión para seleccionar las referencias potencialmente relevantes y excluir aquellas que tras la lectura del título y si quedan dudas del resumen, parezcan claramente irrelevantes. A continuación se puede acceder a los manuscritos íntegros localizando los artículos en revistas gratuitamente accesibles (www.freemedicaljournals.com), aprovechando las suscripciones de las instituciones o bibliotecas institucionales a las que pueda optar cada investigador, contactando directamente con los autores en plataformas como ResearchGate o teniendo que pagar por los derechos de acceso a los artículos preseleccionados, en el caso de considerarse necesarios para la revisión. En ocasiones se hallan duplicaciones del mismo estudio debido a la existencia de informes previos de registro o a la publicación de los protocolos. A menudo se trata de duplicaciones exactas; otras veces pueden ser publicaciones en serie con datos actualizados. Por supuesto, incluir datos duplicados podría llevar a conclusiones falsas y sesgar la síntesis de datos en la revisión. En estos casos deberían tenerse en cuenta únicamente los datos presentados en los informes más completos y que cuenten con el seguimiento más largo.
A continuación, se inicia la revisión de los artículos seleccionados a texto completo. Es frecuente que en esta fase se descarten algunos estudios, por lo que se recomienda elaborar una lista detallada con los estudios excluidos y las razones para su exclusión. Este paso no lleva mucho tiempo e incrementa la calidad de la revisión. Por otra parte, tanto el cribado inicial de las referencias como la revisión de los manuscritos íntegros deben realizarse de forma independiente, al menos por dos revisores. Aunque anteriormente se hayan establecido los criterios de selección, las decisiones de inclusión o exclusión pueden ser subjetivas. En este sentido es recomendable que al principio del proceso los criterios de selección se prueben en un subconjunto de estudios, el objetivo es observar si las decisiones de ambos revisores se aplican de forma coherente. Si no existe acuerdo, es probable que los criterios no estén suficientemente definidos y haya que revisarlos. Una vez aclarada esta cuestión, los desacuerdos que surgen suelen ser meros descuidos que se solucionan por consenso. A falta de consenso, existe la posibilidad de contar con la moderación de un tercer revisor. Aquellas revisiones que solo cuentan con uno o dos autores, es muy probable que contengan errores en el proceso de selección de estudios; para evitarlos es preferible plantear desde el principio la figura del tercer revisor.
Sesgo de publicación y otros sesgos relacionadosVariables como la falta de significación estadística de los resultados, el idioma, la fecha de publicación o la indexación en las bases de datos dificultan el acceso a algunos estudios. Aquéllos que presentan intervenciones poco efectivas tienen menor probabilidad de ser publicados o se incluyen en publicaciones menos accesibles. El sesgo de publicación puede deberse también a que los resultados son contrarios a la opinión general. Las revisiones sistemáticas que no identifican este tipo de estudios se arriesgan a exagerar o infravalorar el desenlace de una intervención. Para evitar este sesgo, la revisión tiene que hacerse de forma sistemática y hay que intentar localizar también los artículos menos accesibles. Dos son los requisitos esenciales: efectuar la búsqueda en numerosas bases de datos y evitar la restricción lingüística en la selección de estudios. En especial, este último criterio es de gran relevancia porque cada vez es más evidente que los estudios que presentan resultados con mayor magnitud de efecto tienden a publicarse en revistas anglófonas, mientras que los que contienen resultados más débiles o están escritos en idiomas distintos al inglés suelen publicarse en revistas con menor visibilidad o menor accesibilidad. Por lo tanto, hay más posibilidades de aumentar el riesgo de sesgo si sólo se realizan las búsquedas en revistas anglófonas, ya que los resultados tenderán a ser de mayor magnitud. Hoy en día es relativamente fácil solucionar este problema, fundamentalmente gracias a la presencia de grupos en redes sociales con los que revisores de todo el mundo se pueden poner en contacto. Por otra parte, los programas de traducción facilitan la utilización de artículos en diferentes idiomas; no obstante, hay que tener en cuenta que esas traducciones no son del todo fiables debido al alto nivel de especialización del lenguaje científico.
ConclusionesDespués de haber formulado una pregunta válida, con todos sus componentes, en el primer paso de la revisión sistemática, la definición de una estrategia de búsqueda eficaz es esencial para continuar el proyecto. Una búsqueda completa, es decir, realizada en múltiples bases de datos, con criterios de inclusión y exclusión bien especificados, en la que se intente reducir el sesgo de publicación, aportará los estudios relevantes para la revisión. Los siguientes pasos nos acercarán al objetivo final: proporcionar resultados válidos, precisos y útiles.
FinanciaciónLos autores no han recibido ningún tipo de financiación para la elaboración de este documento.
Conflicto de interesesTodos los autores declaran no tener ningún conflicto de intereses relacionado con este manuscrito.
Agradecemos a Daniel Gavilán Cabello su colaboración en la traducción de este artículo.
Khalid S. Khan está contratado por la Universidad de Granada como investigador distinguido gracias a una ayuda del programa Beatriz Galindo del Ministerio de Ciencia, Innovación y Universidades, España.
