17

Ten precaución con la promoción selectiva de estudios

——————————————————————————–

 Un día cualquiera, en la vida de un médico

 

Eulali Mariñelarena Mañeru.

Médica de familia. Coodinadora de la Unidad Docente de Medicina de Familia de Gipuzkoa. Mimebro del Grupo MBE de Osatzen*

* El texto y la presentación ha sido revisado por los miembros del grupo MBE de Osatzen

Presentación

http://prezi.com/som95mc4jm5m/sesgo-de-publicacion/

Hoy, al igual que siempre, recibo a cuatro visitadores médicos antes de lidiar con la intensa agenda, que hoy, como ayer, es modelo “a destajo”. Una vez más escucho las excelencias de productos ya conocidos y ampliamente prescritos pero, a su vez, me voy familiarizando con las novedades farmacoterapéuticas ante su pronta salida al mercado, lo que me asegura adelantarme en información a ese paciente experto en el manejo de Internet y que me vuelve loca.

Esta información viene acompañada de un bonito folleto publicitario donde existe la frase resumen, siguiendo las directrices de las mejores  escuelas de marketing, y los grandes resultados que avalan su mensaje. Por supuesto, rodeados siempre por el halo justiciero de la “p” o significación estadística.

Hoy casualmente vienen a presentarme varios fármacos para la próstata, lo cual me viene al pelo porque entre los citados tengo a Juan y tenemos pendiente la valoración de su clínica prostática.

«“Esto parece interesante! ¿Será que va directo a la próstata?”

-“Vaya! Esto me lo tengo que mirar. No recuerdo bien este asunto de la DHT pero ciertamente consigue reducirla de forma muy importante.”

-“Pues mira: esto parece más interesante. Si algo tiene claro Juan es que no se quiere operar.”

Puede, sin embargo, que yo me muestre bastante escéptica a estos mensajes y prefiera recurrir a la búsqueda de los estudios que fundamentan los logros tan vitoreados. Mis pinitos en la MBE van dejando huella…

Quizás exista un ECA, metodológicamente bien hecho, con un gran número de pacientes y con unos resultados concluyentes.

Lo habitual será que encuentre estudios con un pequeño número de pacientes y con periodos de seguimiento cortos y yo, guiada por la prudencia, decida esperar a que la publicación de más estudios sobre el mismo fármaco puedan ser incorporados en un metaanálisis y el resultado final, más robusto, me ofrezca  mayor seguridad en la decisión que adopte.

Tras una tarde de “zapineo” en la tele −que nos muestra un mundo habitado por asesinos, violadores, traficantes, señores de la guerra, mentirosos, incitadores del miedo, politiquillos de poca monta, usurpadores de intimidades−, me pregunto si las publicaciones científicas se regirán por el mismo patrón que la difusión de noticias en los medios de comunicación de masas, ocultando otras realidades que no cumplen el requisito de ser noticiables.

Lo cierto es que, bien porque el propio investigador decide no publicar un estudio que no consigue avalar su hipótesis de partida, bien porque al editor no le gustan los estudios sin diferencias estadísticamente significativas, bien porque la ocultación de datos responde a una estrategia concreta, lo cierto es que tal y como muestra una RS de la colaboración Cochrane  los ensayos clínicos con resultados positivos tienen una mayor probabilidad de ser publicados que los ensayos clínicos con resultados no significativos o nulos (OR: 3,90; IC 95%: 2,68 a 5,68).(1)

Otra variante más de este sesgo consistente en la publicación incompleta de resultados, ya lo anunciaba la revista JAMA en 2004(2): el 50% de variables eficacia y el 65% de seguridad son publicadas de forma incompleta; significativamente más evidente en las variables sin diferencias significativas. Así lo confirman los datos preliminares del proyecto ORBIT (Outcome Reporting Bias in Trials), recientemente publicados. Tal y como podemos leer en el Rincón de Sísifo, la prevalencia de la publicación incompleta de los estudios es alta y generalmente los investigadores no son conscientes de las implicaciones de esta práctica tiene como objetivo cuantificar este sesgo en la presentación de resultados sobre la variable principal. Algunos datos preliminares ya publicados reafirman la frecuencia de esta práctica con poca consciencia de los investigadores sobre las consecuencias de ésta.

Si a todo ello  le sumamos el fenómeno de la duplicación, por el que los mismos resultados positivos son presentados como integrantes de estudios diferentes(3), la interpretación que hacemos, puede estar claramente distorsionada

Me pregunto… ¿tendrá esto consecuencias?: pues parece que sí, veamos unos ejemplos:

 

• A lo largo de la década de los 80, el uso profuso de antiarrítmicos tras un IAM se estima que provocó miles de muertes prematuras, que quizás se hubiesen evitado de haberse dado a conocer los resultados del estudio realizado con el antiarrítmico lorcainida, pero que por razones comerciales no se llegó a comercializar ni se llegaron a publicar sus resultados(4).
• El escándalo en torno a la ocultación de datos sobre el aumento de incidencia de infartos del VIOXX, finalmente retirado del mercado, es todavía reciente(5).
• La eficacia de la reboxetina, antidepresivo con gran cuota de mercado en Alemania, basada en resultados sobre sólo 1.600 pacientes de los 4.600 estudiados ha provocado la amenaza de retirada de financiación de la agencia alemana del medicamento (IQWIG). Tras una nueva reevaluación de los datos, publicados y no publicados, patrocinada por la propia agencia se ha descubierto que reboxetina es inferior a otros ISRS con los que se compara y sin diferencias significativas frente a placebo(6).
•  La valoración conjunta de datos publicados y no publicados sobre el tratamiento de la depresión en la infancia y la adolescencia sugiere un perfil beneficio/riesgo desfavorable para los ISRS, excepto para la fluoxetina, contrariamente a lo que se sabía en base a los datos publicados(7).
• La reciente suspensión de la comercialización de la rosiglitazona, por su relación con el aumento de eventos cardiovasculares(8), es otro claro ejemplo de ocultación de datos por parte de la industria farmacéutica a la comunidad científica.

Ante esta situación de zozobra: ¿Qué se puede hacer?… Pues algunas medidas les corresponde tomarlas a otros:

1.  Implantar un registro de todos los ensayos clínicos que se vayan a realizar y la información que deben contener(9).

• Regular el libre acceso a los ensayos clínicos.
• Acordar por parte del consejo editorial de las revistas la no publicación de estudios que no cuenten con el registro previo.
• Sensibilizar a los investigadores en la relevancia de los datos aun cuando no encuentren diferencias significativas.

-“Pero y yo ¿qué puedo hacer?”

Ante la lectura de una RS comprobar si:

Se describe búsqueda de literatura gris, contacto con autores.

• ¿Han utilizado restricción de idioma?: Los autores cuyo idioma no es el inglés suelen publicar resultados positivos en revistas en inglés, ya que éstas poseen mayor impacto internacional. Los resultados negativos tienden a publicarse en revistas en otros idiomas diferentes al inglés.
• Se conoce la fuente de financiación: Los ECAs financiados por la industria presentan mayor probabilidad de presentar resultados favorables a la intervención estudiada y menor probabilidad de haber publicado sus resultados transcurridos dos años de su finalización(10).
• Describen algún método para detectar un posible sesgo de publicación.
• Recordar que ante la información del folleto publicitario:
• Huir de la seducción de la “p” y de la frase resumen.
• Valorar el resultado que nos muestran y preguntarnos con mirada del paciente si es el importante.
• Escudriñar la representación gráfica no vaya a ser que encontremos los gráficos manipulados.
• Mirar la bibliografía que sustenta las afirmaciones: ¿son comunicaciones a congresos o posters ?

Puedo finalmente consultar cualquiera de los estupendos boletines o blogs farmacoterapéuticos que están disponibles en la red o bien Iniciativas como la crítica a la publicidad de nuevos medicamentos del Comité Vasco de evaluación de nuevos medicamentos, que pueden ayudarnos a desenmascarar las medias o la ausencia de verdades que en un alto porcentaje de los casos se publicitan.

 

Bibliografía

1.   Hopewell S, Loudon K, Clarke MJ, Oxman AD, Dickersin K. Publication bias in clinical trials due to statistical significance or direction of trial results. Cochrane Database Syst Rev. 2009(1):MR000006.

2.   Chan AW, Hróbjartsson A, Haahr MT, Gøtzsche PC, Altman DG. Empirical evidence for selective reporting of outcomes in randomized trials: comparison of protocols to published articles. JAMA. 2004;291(20):2457-65.

3.   interpretando la literatura médica:¿Qué necesito saber?. Parte I. INFAC [Internet]. 2006; 14(7).

4.   Cowley AJ, Skene A, Stainer K, Hampton JR. The effect of lorcainide on arrhythmias and survival in patients with acute myocardial infarction: an example of publication bias. International Journal of Cardiology. 1993;40(2):161-6.

5.   Topol EJ. Failing the Public Health — Rofecoxib, Merck, and the FDA. New England Journal of Medicine. 2004;351(17):1707-9.

6.   Eyding D, Lelgemann M, Grouven U, Härter M, Kromp M, Kaiser T, et al. Reboxetine for acute treatment of major depression: systematic review and meta-analysis of published and unpublished placebo and selective serotonin reuptake inhibitor controlled trials. BMJ. 2010;341.

7.   Whittington CJ, Kendall T, Fonagy P, Cottrell D, Cotgrove A, Boddington E. Selective serotonin reuptake inhibitors in childhood depression: systematic review of published versus unpublished data. Lancet. 2004;363(9418):1341-5.

8.   Juurlink DN. Rosiglitazone and the Case for Safety Over Certainty. JAMA: The Journal of the American Medical Association. 2010;304(4):469-71.

9.   De Angelis C, Drazen JM, Frizelle FA, Haug C, Hoey J, Horton R, et al. Clinical trial registration: a statement from the International Committee of Medical Journal Editors. N Engl J Med. 2004;351(12):1250-1.

10. Lexchin J, Bero LA, Djulbegovic B, Clark O. Pharmaceutical industry sponsorship and research outcome and quality: systematic review.  BMJ. England2003. p. 1167-70.

A no ser que en el documento figure lo contrario este trabajo se encuentra dentro de la Iniciativa para una Prescripción Prudente por Varios Autores sujeta a una licencia Creative Commons un Reconocimiento-NoComercial-CompartirIgual 3.0 Unported (CC BY-NC-SA 3.0)

 17

Ten precaución con la promoción selectiva de estudios

——————————————————————————–

 

Un día cualquiera, en la vida de un médico

 

Eulali Mariñelarena Mañeru.

Médica de familia. Coodinadora de la Unidad Docente de Medicina de Familia de Gipuzkoa. Mimebro del Grupo MBE de Osatzen*

* El texto y la presentación ha sido revisado por los miembros del grupo MBE de Osatzen

Presentación

http://prezi.com/som95mc4jm5m/sesgo-de-publicacion/

Texto:

 

Hoy, al igual que siempre, recibo a cuatro visitadores médicos antes de lidiar con la intensa agenda, que hoy, como ayer, es modelo “a destajo”. Una vez más escucho las excelencias de productos ya conocidos y ampliamente prescritos pero, a su vez, me voy familiarizando con las novedades farmacoterapéuticas ante su pronta salida al mercado, lo que me asegura adelantarme en información a ese paciente experto en el manejo de Internet y que me vuelve loca.

Esta información viene acompañada de un bonito folleto publicitario donde existe la frase resumen, siguiendo las directrices de las mejores  escuelas de marketing, y los grandes resultados que avalan su mensaje. Por supuesto, rodeados siempre por el halo justiciero de la “p” o significación estadística.

Hoy casualmente vienen a presentarme varios fármacos para la próstata, lo cual me viene al pelo porque entre los citados tengo a Juan y tenemos pendiente la valoración de su clínica prostática.

-“Esto parece interesante! ¿Será que va directo a la próstata?”

-“Vaya! Esto me lo tengo que mirar. No recuerdo bien este asunto de la DHT pero ciertamente consigue reducirla de forma muy importante.”

-“Pues mira: esto parece más interesante. Si algo tiene claro Juan es que no se quiere operar.”

Puede, sin embargo, que yo me muestre bastante escéptica a estos mensajes y prefiera recurrir a la búsqueda de los estudios que fundamentan los logros tan vitoreados. Mis pinitos en la MBE van dejando huella…

Quizás exista un ECA, metodológicamente bien hecho, con un gran número de pacientes y con unos resultados concluyentes.

Lo habitual será que encuentre estudios con un pequeño número de pacientes y con periodos de seguimiento cortos y yo, guiada por la prudencia, decida esperar a que la publicación de más estudios sobre el mismo fármaco puedan ser incorporados en un metaanálisis y el resultado final, más robusto, me ofrezca  mayor seguridad en la decisión que adopte.

Tras una tarde de “zapineo” en la tele −que nos muestra un mundo habitado por asesinos, violadores, traficantes, señores de la guerra, mentirosos, incitadores del miedo, politiquillos de poca monta, usurpadores de intimidades−, me pregunto si las publicaciones científicas se regirán por el mismo patrón que la difusión de noticias en los medios de comunicación de masas, ocultando otras realidades que no cumplen el requisito de ser noticiables.

Lo cierto es que, bien porque el propio investigador decide no publicar un estudio que no consigue avalar su hipótesis de partida, bien porque al editor no le gustan los estudios sin diferencias estadísticamente significativas, bien porque la ocultación de datos responde a una estrategia concreta, lo cierto es que tal y como muestra una RS de la colaboración Cochrane  los ensayos clínicos con resultados positivos tienen una mayor probabilidad de ser publicados que los ensayos clínicos con resultados no significativos o nulos (OR: 3,90; IC 95%: 2,68 a 5,68).(1)

Otra variante más de este sesgo consistente en la publicación incompleta de resultados, ya lo anunciaba la revista JAMA en 2004(2): el 50% de variables eficacia y el 65% de seguridad son publicadas de forma incompleta; significativamente más evidente en las variables sin diferencias significativas. Así lo confirman los datos preliminares del proyecto ORBIT (Outcome Reporting Bias in Trials), recientemente publicados. Tal y como podemos leer en el Rincón de Sísifo, la prevalencia de la publicación incompleta de los estudios es alta y generalmente los investigadores no son conscientes de las implicaciones de esta práctica tiene como objetivo cuantificar este sesgo en la presentación de resultados sobre la variable principal. Algunos datos preliminares ya publicados reafirman la frecuencia de esta práctica con poca consciencia de los investigadores sobre las consecuencias de ésta.

Si a todo ello  le sumamos el fenómeno de la duplicación, por el que los mismos resultados positivos son presentados como integrantes de estudios diferentes(3), la interpretación que hacemos, puede estar claramente distorsionada

Me pregunto… ¿tendrá esto consecuencias?: pues parece que sí, veamos unos ejemplos:

 

• A lo largo de la década de los 80, el uso profuso de antiarrítmicos tras un IAM se estima que provocó miles de muertes prematuras, que quizás se hubiesen evitado de haberse dado a conocer los resultados del estudio realizado con el antiarrítmico lorcainida, pero que por razones comerciales no se llegó a comercializar ni se llegaron a publicar sus resultados(4).
• El escándalo en torno a la ocultación de datos sobre el aumento de incidencia de infartos del VIOXX, finalmente retirado del mercado, es todavía reciente(5).
• La eficacia de la reboxetina, antidepresivo con gran cuota de mercado en Alemania, basada en resultados sobre sólo 1.600 pacientes de los 4.600 estudiados ha provocado la amenaza de retirada de financiación de la agencia alemana del medicamento (IQWIG). Tras una nueva reevaluación de los datos, publicados y no publicados, patrocinada por la propia agencia se ha descubierto que reboxetina es inferior a otros ISRS con los que se compara y sin diferencias significativas frente a placebo(6).
•  La valoración conjunta de datos publicados y no publicados sobre el tratamiento de la depresión en la infancia y la adolescencia sugiere un perfil beneficio/riesgo desfavorable para los ISRS, excepto para la fluoxetina, contrariamente a lo que se sabía en base a los datos publicados(7).
• La reciente suspensión de la comercialización de la rosiglitazona, por su relación con el aumento de eventos cardiovasculares(8), es otro claro ejemplo de ocultación de datos por parte de la industria farmacéutica a la comunidad científica.

Ante esta situación de zozobra: ¿Qué se puede hacer?… Pues algunas medidas les corresponde tomarlas a otros:

• Implantar un registro de todos los ensayos clínicos que se vayan a realizar y la información que deben contener(9).
• Regular el libre acceso a los ensayos clínicos.
• Acordar por parte del consejo editorial de las revistas la no publicación de estudios que no cuenten con el registro previo.
• Sensibilizar a los investigadores en la relevancia de los datos aun cuando no encuentren diferencias significativas.

-“Pero y yo ¿qué puedo hacer?”

Ante la lectura de una RS comprobar si:

• Se describe búsqueda de literatura gris, contacto con autores.
• ¿Han utilizado restricción de idioma?: Los autores cuyo idioma no es el inglés suelen publicar resultados positivos en revistas en inglés, ya que éstas poseen mayor impacto internacional. Los resultados negativos tienden a publicarse en revistas en otros idiomas diferentes al inglés.
• Se conoce la fuente de financiación: Los ECAs financiados por la industria presentan mayor probabilidad de presentar resultados favorables a la intervención estudiada y menor probabilidad de haber publicado sus resultados transcurridos dos años de su finalización(10).
• Describen algún método para detectar un posible sesgo de publicación.
• Recordar que ante la información del folleto publicitario:
• Huir de la seducción de la “p” y de la frase resumen.
• Valorar el resultado que nos muestran y preguntarnos con mirada del paciente si es el importante.
• Escudriñar la representación gráfica no vaya a ser que encontremos los gráficos manipulados.
• Mirar la bibliografía que sustenta las afirmaciones: ¿son comunicaciones a congresos o posters ?

Puedo finalmente consultar cualquiera de los estupendos boletines o blogs farmacoterapéuticos que están disponibles en la red o bien Iniciativas como la crítica a la publicidad de nuevos medicamentos del Comité Vasco de evaluación de nuevos medicamentos, que pueden ayudarnos a desenmascarar las medias o la ausencia de verdades que en un alto porcentaje de los casos se publicitan.

 

Bibliografía

1.   Hopewell S, Loudon K, Clarke MJ, Oxman AD, Dickersin K. Publication bias in clinical trials due to statistical significance or direction of trial results. Cochrane Database Syst Rev. 2009(1):MR000006.

2.   Chan AW, Hróbjartsson A, Haahr MT, Gøtzsche PC, Altman DG. Empirical evidence for selective reporting of outcomes in randomized trials: comparison of protocols to published articles. JAMA. 2004;291(20):2457-65.

3.   interpretando la literatura médica:¿Qué necesito saber?. Parte I. INFAC [Internet]. 2006; 14(7).

4.   Cowley AJ, Skene A, Stainer K, Hampton JR. The effect of lorcainide on arrhythmias and survival in patients with acute myocardial infarction: an example of publication bias. International Journal of Cardiology. 1993;40(2):161-6.

5.   Topol EJ. Failing the Public Health — Rofecoxib, Merck, and the FDA. New England Journal of Medicine. 2004;351(17):1707-9.

6.   Eyding D, Lelgemann M, Grouven U, Härter M, Kromp M, Kaiser T, et al. Reboxetine for acute treatment of major depression: systematic review and meta-analysis of published and unpublished placebo and selective serotonin reuptake inhibitor controlled trials. BMJ. 2010;341.

7.   Whittington CJ, Kendall T, Fonagy P, Cottrell D, Cotgrove A, Boddington E. Selective serotonin reuptake inhibitors in childhood depression: systematic review of published versus unpublished data. Lancet. 2004;363(9418):1341-5.

8.   Juurlink DN. Rosiglitazone and the Case for Safety Over Certainty. JAMA: The Journal of the American Medical Association. 2010;304(4):469-71.

9.   De Angelis C, Drazen JM, Frizelle FA, Haug C, Hoey J, Horton R, et al. Clinical trial registration: a statement from the International Committee of Medical Journal Editors. N Engl J Med. 2004;351(12):1250-1.

10. Lexchin J, Bero LA, Djulbegovic B, Clark O. Pharmaceutical industry sponsorship and research outcome and quality: systematic review.  BMJ. England2003. p. 1167-70.

A no ser que en el documento figure lo contrario este trabajo se encuentra dentro de la Iniciativa para una Prescripción Prudente por Varios Autores sujeta a una licencia Creative Commons un Reconocimiento-NoComercial-CompartirIgual 3.0 Unported (CC BY-NC-SA 3.0)