Tema 5 de 31· Also in this book

Marco RE-AIM

RE-AIM es un marco de evaluación de salud pública que valora una intervención de salud digital en cinco dimensiones distintas —Alcance (Reach), Efectividad (Effectiveness), Adopción (Adoption), Implementación (Implementation) y Mantenimiento (Maintenance)— en lugar de mediante una única métrica. Existe para corregir un modo de fallo específico y común en la evaluación de la salud digital: un programa que informa datos de efectividad impresionantes procedentes de una pequeña población piloto motivada, pero que nunca se adopta a escala o nunca se sostiene más allá de su período piloto financiado, no ha demostrado en realidad valor para la salud pública, por buenas que parezcan sus cifras de resultados principales de forma aislada.

Por qué importa

Los pilotos de salud digital se evalúan con frecuencia únicamente por su efectividad —si la medida de resultado mejoró en quienes lo usaron— mientras las otras cuatro dimensiones quedan sin medir ni informar, lo que sesga sistemáticamente la base de evidencia hacia intervenciones que funcionan bien en condiciones ideales y a pequeña escala, pero que no dicen nada sobre si funcionan a gran escala, llegan a la población que más las necesita o sobreviven más allá de su financiación y entusiasmo iniciales. RE-AIM se desarrolló específicamente para obligar a los evaluadores a informar sobre la validez externa (si esto funcionaría en otros contextos, y para quién) junto con la validez interna (si esto funcionó aquí), lo que importa enormemente a quien deba decidir si financiar, encargar o ampliar una intervención de salud digital con base en los resultados de un único estudio o piloto. Como cada una de las cinco dimensiones puede medirse tanto en el nivel individual como en el organizacional o de entorno, RE-AIM también pone de manifiesto compensaciones —por ejemplo, una intervención muy efectiva aplicada por personal muy seleccionado y altamente capacitado (efectividad sólida, representatividad de adopción débil)— que una única métrica combinada ocultaría por completo.

Cómo se aplica

Alcance         = proporción de la población objetivo elegible que
                   participa, y cuán representativos son los
                   participantes de esa población elegible (no solo el
                   recuento bruto de participantes)

Efectividad     = impacto en los resultados primarios, incluidos la
                   calidad de vida y las consecuencias negativas no
                   previstas, y no solo la medida de resultado principal

Adopción        = proporción y representatividad de los entornos y del
                   personal o agentes de ejecución que adoptan la
                   intervención, en relación con todos los entornos y el
                   personal elegibles

Implementación  = consistencia y fidelidad de la ejecución según lo
                   previsto, tiempo y costo requeridos para ejecutarla,
                   y adaptaciones realizadas en el camino

Mantenimiento   = grado en que la intervención pasa a formar parte de la
                   práctica rutinaria a largo plazo, tanto en el nivel
                   individual (efectos individuales sostenidos) como en
                   el de entorno u organización (institucionalización)

Ejemplo resuelto

Un programa digital de prevención de la diabetes se pone a prueba en 20 clínicas de atención primaria de una región con 200 clínicas elegibles en total. El Alcance se evalúa en 1.200 de unos 15.000 pacientes elegibles estimados en las 20 clínicas piloto (8%), y se constata que los participantes son algo más jóvenes y tienen mayor alfabetización digital que la población elegible completa: una brecha de representatividad que conviene señalar en lugar de ignorar. La Efectividad muestra una reducción clínicamente significativa de la HbA1c media entre quienes completaron el programa, pero una alta tasa de abandono diluye este efecto cuando se evalúa por intención de tratar en todos los pacientes inscritos y no solo en quienes lo completaron. La Adopción es de 20 de 200 clínicas elegibles (10%), concentrada en clínicas con una infraestructura digital preexistente superior al promedio: de nuevo, una preocupación de representatividad. La evaluación de la fidelidad de la Implementación halla que la mayoría de las clínicas ejecutaron el programa en gran medida según lo diseñado, aunque dos clínicas acortaron sustancialmente el proceso de incorporación por presión de tiempo. La evaluación del Mantenimiento, un año después de terminada la financiación del piloto, halla que solo 6 de las 20 clínicas originales siguen ejecutando activamente el programa: un resultado que, informado junto con la cifra inicialmente prometedora de efectividad, ofrece un panorama mucho más completo y honesto de las perspectivas reales del programa que los datos de efectividad por sí solos.

Fuentes de datos y advertencias

Cada dimensión de RE-AIM suele basarse en una fuente de datos distinta: el Alcance y la Adopción, en los registros de inscripción y elegibilidad; la Efectividad, en datos clínicos o de resultados (a menudo los mismos datos ya utilizados para calcular una métrica específica en otra parte de este libro, como la tasa de mejora biométrica); la Implementación, en listas de verificación de fidelidad, registros de ejecución u observación directa; y el Mantenimiento, en una evaluación de seguimiento realizada mucho después del período de evaluación inicial, lo que significa que una evaluación RE-AIM completa no puede realizarse en un único momento y exige planificar la evaluación desde el principio, no añadirla de forma retrospectiva. Dado que informar con honestidad las cinco dimensiones (incluidos los resultados débiles en algunas) supone más trabajo y es menos favorecedor que informar solo la efectividad, las evaluaciones publicadas de salud digital subinforman de forma desproporcionada el Alcance, la Adopción y el Mantenimiento en comparación con la Efectividad: un patrón conocido de sesgo de publicación que debe vigilar quien utilice evidencia etiquetada como RE-AIM para fundamentar una decisión.

Errores comunes

  • Informar solo la efectividad y llamarlo una evaluación RE-AIM: usar el nombre RE-AIM mientras se informa una sola de sus cinco dimensiones anula el propósito del marco y no debería describirse como una evaluación RE-AIM.
  • Medir el Alcance y la Adopción como recuentos brutos en lugar de proporciones de la población elegible: un gran recuento bruto de participantes puede seguir representando una fracción pequeña y poco representativa de a quienes la intervención idealmente debería llegar; calcule siempre frente al denominador completo de elegibles.
  • Evaluar el Mantenimiento demasiado pronto: la institucionalización y el efecto sostenido solo pueden juzgarse bien una vez que se desvanecen la financiación inicial o los efectos de novedad; una evaluación realizada inmediatamente después de terminar un piloto no puede pronunciarse sobre el Mantenimiento, sin importar cómo se vean las otras cuatro dimensiones.
  • Tratar las cinco dimensiones como igualmente ponderadas o combinables en una sola puntuación: RE-AIM es deliberadamente un perfil multidimensional, no un número único; combinar las dimensiones en una puntuación compuesta descarta precisamente la visibilidad de las compensaciones que el marco está diseñado para preservar.

Fuentes

  • Glasgow, Vogt y Boles, "Evaluating the public health impact of health promotion interventions: the RE-AIM framework", American Journal of Public Health, el marco original publicado
  • RE-AIM.org, el recurso público mantenido del marco con medidas, herramientas de planificación y aplicaciones publicadas
  • Literatura revisada por pares que aplica RE-AIM específicamente a intervenciones de salud digital, por ejemplo estudios publicados en el Journal of Medical Internet Research (JMIR) y en Translational Behavioral Medicine

Vea también: tasa de acceso digital y tasa de retención de usuarios, dos de las métricas de este libro que se corresponden estrechamente con las dimensiones de Alcance y Mantenimiento de RE-AIM, respectivamente.