Ya disponible en @AnnalsofIM👇
Nuestro nuevo análisis de un estudio observacional publicado en @NEJM
que afirmaba que la eliminación de la obligatoriedad de llevar mascarilla en las escuelas tuvo el efecto de aumentar los casos de COVID
Mostramos por qué la conclusión del estudio era errónea
y cómo analizar solo datos seleccionados puede arrojar resultados engañosos
1/
Out now in @AnnalsofIM👇
— Tracy Høeg, MD, PhD (@TracyBethHoeg) October 8, 2024
Our re-analysis of an observational study published in @NEJM claiming dropping school mask mandates had the effect of increasing covid cases
We show why the study's conclusion was faulty
&
How analyzing only select data can give misleading results
1/ https://t.co/FLAsGv8Olv pic.twitter.com/rKPzXMR6iw
Y esto es importante porque:
1. El estudio fue muy influyente
2. Exigir que los niños usen mascarillas tiene muchas desventajas (como publicamos recientemente https://www.ncbi.nlm.nih.gov/pmc/articles/PMC10894839/
3. Los mismos análisis problemáticos pueden afectar las futuras decisiones de salud pública
And this is important because:
— Tracy Høeg, MD, PhD (@TracyBethHoeg) October 8, 2024
1. The study was highly influential
2. Requiring children to wear masks has many downsides (as we recently published https://t.co/QjwXgARu7d)
3. The same problematic analyses may affect future public health decisions
Ahora describiré un par de partes clave de nuestro análisis.
Now I will describe a couple of the key parts of our analysis
— Tracy Høeg, MD, PhD (@TracyBethHoeg) October 8, 2024
Cowger et al. seleccionaron un grupo de control (en violeta) que, como demostramos, era un caso atípico en términos de ingresos medios (altos) y, como describimos en el artículo, parecía haber sido elegido de manera arbitraria.
Identificamos grupos de control alternativos (🟢🔴🟡) en Massachusetts que también habían abandonado los mandatos de uso de mascarillas
Cowger et al selected a control group (in purple) that we show was a state outlier in terms of median income (high) and, as we describe in the article, appeared to be arbitrarily chosen.
— Tracy Høeg, MD, PhD (@TracyBethHoeg) October 8, 2024
We identified alternate control groups (🟢🔴🟡) in MA that had also dropped mask mandates pic.twitter.com/lQnw3I217c
Utilizando los grupos de control alternativos, descubrimos que la eliminación de la obligación de usar mascarillas se asoció con un aumento o una disminución de los casos en el distrito (después del cambio de política de uso de mascarillas en el distrito).
Esto contradice el lenguaje causal que Cowger et al. utilizaron para describir sus hallazgos.
Using the alternate control groups, we found dropping mask mandates was associated with either increased or decreased district cases (following the district mask policy change)
— Tracy Høeg, MD, PhD (@TracyBethHoeg) October 8, 2024
This speaks against the causal language Cowger et al used to describe their findings. pic.twitter.com/16awTjUKjU
Su artículo utilizó una metodología específica, llamada Diferencia en Diferencias, que permite la inferencia causal a partir de datos observacionales, pero sólo si se cumplen ciertos requisitos previos.
Their paper used a specific methodology, called Difference in Differences, which allows for causal inference from observational data, but only if certain prerequisites are met.
— Tracy Høeg, MD, PhD (@TracyBethHoeg) October 8, 2024
Uno de estos requisitos previos es la ausencia de factores de confusión que varíen con el tiempo. Sin embargo, las comunidades en las que los distritos mantuvieron el uso obligatorio de mascarillas tuvieron el mayor aumento de infecciones por COVID-19 justo antes del cambio de política de uso de mascarillas. Esto probablemente habría disminuido las tasas de casos en los distritos con mascarillas y podría explicar una gran parte del resultado que encontraron.
La inmunidad previa fue un factor de confusión importante que varió en el tiempo y excluyó el uso de la metodología Diff in Diff para la inferencia causal, junto con cualquier otro cambio que se produjo en torno al momento del cambio de política de mascarillasOne of these prerequisites is an absence of time varying confounders. But, the communities where the districts maintained mask mandates had the largest increase in covid infections just before the mask policy change. This would have likely decreased the case rates in the masked… pic.twitter.com/dZpjHa8ZSA
— Tracy Høeg, MD, PhD (@TracyBethHoeg) October 8, 2024
(como cambios en las prácticas de prueba, como describimos en el artículo)
Nuestro artículo analiza con mucho más detalle los riesgos de utilizar este tipo de datos observacionales y por qué su metodología era inadecuada, dadas las circunstancias, para la inferencia causal.Prior immunity was an important time varying confounder and precluded the use of the Diff in Diff methodology for causal inference - along with any other changes that happened around the time of the mask policy change
— Tracy Høeg, MD, PhD (@TracyBethHoeg) October 8, 2024
(such as changes in testing practices, as we describe in the… pic.twitter.com/7lKFTMgCTK
Our paper goes into a lot more details about the pitfalls of using this sort of observational data and why their methodology was inappropriate, given the circumstances, for causal inference.https://t.co/mVHdnjUxXV
— Tracy Høeg, MD, PhD (@TracyBethHoeg) October 8, 2024
Algunos pueden recordar el artículo de @NEJM que volvimos a analizar y que concluía diciendo: "Nuestros resultados también sugieren que el uso universal de mascarillas puede ser una herramienta importante para mitigar los efectos del racismo estructural en las escuelas".
Pero, como no tienen los datos que demuestren que las órdenes de uso de mascarillas "funcionan", de hecho no podemos descartar que las órdenes de uso de mascarillas puedan aumentar el racismo estructural.
https://www.nejm.org/doi/full/10.1056/NEJMoa2211029
Some may recall the @NEJM article we re-analyzed concluded with "Our results also suggest that universal masking may be an important tool for mitigating the effects of structural racism in schools"
— Tracy Høeg, MD, PhD (@TracyBethHoeg) October 8, 2024
But, as they don't have the data to show mask mandates "work" indeed we can't…
Y es por eso que en medicina debemos ser humildes antes de sacar conclusiones apresuradas cuando los datos no son lo suficientemente contundentes para respaldarlas.
Porque la mayoría de las intervenciones tienen desventajas y consecuencias no deseadas.
And this is why we must be humble in medicine before jumping to conclusions when the data are not strong enough to support them.
— Tracy Høeg, MD, PhD (@TracyBethHoeg) October 8, 2024
Because most interventions have downsides and unintended consequences.
En resumen, fue un grupo de autores increíble con el que trabajar, entre ellos @ShamezLadhani, @VPrasadMDMPHy Ram Duriseti
Pero quiero agradecer especialmente a mi coautor principal @AChandra_TO, quien me enseñó muchísimo mientras revisábamos varias veces este artículo.
In summary, this was an amazing group of authors to work with including @ShamezLadhani , @VPrasadMDMPH & Ram Duriseti
— Tracy Høeg, MD, PhD (@TracyBethHoeg) October 8, 2024
But a specific shoutout to my co-1st author @AChandra_TO who taught me so much while we were going through the multiple revisions of this paper.
El equipo editorial de @AnnalsofIM nos brindó muchos comentarios importantes para nuestras revisiones e incluso tuvimos dos reuniones por Zoom para trabajar en la mejora del artículo.
Felicitaciones a ellos por publicar esto.
The editorial staff at @AnnalsofIM provided so much important feedback for our revisions & we even had 2 zoom meetings to work on improving the paper.
— Tracy Høeg, MD, PhD (@TracyBethHoeg) October 8, 2024
Kudos to them for publishing this.
Esperamos que nuestro artículo final contribuya a un cambio de cultura en la medicina y la salud pública donde los científicos (y las revistas... ejem @NEJM) sean más escépticos sobre el uso de datos observacionales para la atribución de efectos causales a las intervenciones.
Hopefully our final paper will contribute to a changing culture in medicine & public health where scientists (oh & journals..ahem @NEJM) are more skeptical about the use of observational data for the attribution of causal effects to interventions
— Tracy Høeg, MD, PhD (@TracyBethHoeg) October 8, 2024
The end!https://t.co/mVHdnjUxXV
No hay comentarios:
Publicar un comentario