Sesgo en valoración crítica - el ejemplo de la acupuntura para la rehabilitación en el ACV

Acupuntura en el ACV 
Espera un momento 
Comentario
 El número 80 de Bandolera contenía un corto resumen de alguno de los modos en que el sesgo puede surgir en los estudios, y distorsionar sus resultados. Con pequeñas excepciones, el sesgo sigue siempre un camino unidireccional,  haciendo que los resultados parezcan mejor de lo que son. 

El saber que el sesgo puede estar presente en estudios individuales, o en revisiones sistemáticas, si no se han tenido en cuenta los sesgos potenciales, implica que cada uno de nosotros, individualmente, debe tener su propio detector de sesgos actuando continuamente. En los metaanálisis, donde los datos se combinan, los tests de análisis de sensibilidad,  a menudo prueban si estudios con  poblaciones diferentes ,o estudios con distintas características, tienen resultados diferentes. En las revisiones sistemáticas donde  no se combinan los datos, la impresión de si una técnica "funciona", a menudo, se deriva del recuento de votos: del número de artículos que dicen que "sí" frente a los que dicen que "no". 

Acupuntura en el ACV

Supongamos que tenemos una propuesta para utilizar acupuntura en un paciente con ACV, ya que esto, aparentemente mejora, su rehabilitación. Con mentalidad de MBE, nos preguntamos si hay algún estudio aleatorizado que demuestre su eficacia. La respuesta es que encontramos siete estudios en nuestra búsqueda en las distintas bases de datos, y que seis de los siete estudios demuestran que la acupuntura "funciona" en el ACV. No hay que pensarlo, deberemos aconsejar su utilización. 

Espera un momento

 Pedimos a nuestros colegas, que tenían experiencia en lectura crítica de artículos científicos, que leyesen los artículos. Estos relataban una historia completamente distinta: 
  • Ninguno era doble ciego. 
  • La evaluación de calidad en los seis estudios "positivos" era 2o menos sobre 5.
  • La puntuación de validez fue de 8 o menos sobre 16, para cinco de los estudios positivos.
  • Cuatro de los estudios positivos fue hecho en el lejano oriente.
 Nuestros colegas nos informaron que esto significaba que todos los estudios positivos estaban potencialmente sesgados. Mas aún, cuando leyeron los artículos, estuvieron en desacuerdo con los autores originales en cuatro de los ensayos clínicos "positivos": esos ensayos eran realmente negativos.
 

Tabla 1: Acupuntura en ACV: recuento de votos de los estudios que tienen y no tienen en cuenta los sesgos

  Conclusión de los autores Conclusión de los revisores
Fuente potencial de sesgo Positiva Negativa Positiva Negativa
Sin considerar causas de sesgo  6 1 2 5
Estudios doble ciego 0 0 0 0
Estudios observador ciego 2 1 0 3
Estudios no ciegos 4 0 2 2
Evaluación de calidad: 3 o más 0 1 0 1
Evaluación de calidad: 2 o menos 6 0 2 4
Puntuación de validez 9 o más 1 1 0 2
Puntuación de validez 8 o menos 5 0 2 3
Estudios europeos 2 1 1 2
Estudios del lejano oriente 4 0 1 3
Evaluación de calidad utilizando  escala 0-5  [Jadad et al, 1996]; Puntuación de validez utilizando escala 0-16  [Smith et al, 2000]; Definiciones geográficas [Vickers et al; 1998]
 Así pues, ¿Cuantos de los ensayos que teníamos estaban libres de sesgo potencial y eran positivos? La respuesta es ninguno. No solo esto, sino que nuestro colega nos dijo que los revisores no estaban realmente seguros de si lo que realmente se estaba evaluando era acupuntura. Todos los ensayos utilizaron "electro-acupuntura". Tres estudios mencionaron que se había elevado el voltaje lo suficiente como para conseguir pequeñas contracciones musculares, y posiblemente los otros estudios hicieron lo mismo, aunque no lo mencionasen. ¿Es esto acupuntura o estimulación eléctrica de los músculos para mantener el tono?

Comentario

 Esto es una rápida estimación de una cuestión que llevó un considerable tiempo a personas experimentadas. Para ayudar a los lectores, la versión completa se ha publicado en la página de Bandolier Internet en html y en formato PDF para descargar. Cuando tratamos de sesgos, merece la pena recordar que hay mucho sobre este tema

Referencia:

  1. LA Smith, OA Moore, HJ McQuay, RA Moore. Assessing the evidence of effectivenessof acupuncture for stroke rehabilitation: stepped assessment of likelihoodof bias. Bandolier publication en www.jr2.ox.ac.uk/bandolier/booth/alternat/ACstroke.html. 
Traducido por Fuensanta Meseguer Guaita. Anestesista. Murcia
url original: http://www.jr2.ox.ac.uk/bandolier/band89/b89-6.html

articulo previo  en este número