Kerangka Kerja RE-AIM — Metrik Kesehatan Digital

RE-AIM adalah kerangka evaluasi kesehatan masyarakat yang menilai intervensi kesehatan digital di lima dimensi berbeda — Reach (Jangkauan), Effectiveness (Efektivitas), Adoption (Adopsi), Implementation (Implementasi), dan Maintenance (Pemeliharaan) — daripada melalui satu metrik tunggal mana pun. Ini ada untuk mengoreksi mode kegagalan tertentu yang umum dalam evaluasi kesehatan digital: sebuah program yang melaporkan data efektivitas yang mengesankan dari populasi percontohan kecil dan termotivasi sementara tidak pernah diadopsi dalam skala besar, atau tidak pernah dipertahankan setelah periode percontohan yang didanai, sebenarnya belum menunjukkan nilai kesehatan masyarakat, betapapun bagusnya angka hasil utamanya terlihat secara terisolasi.

Mengapa Ini Penting

Program percontohan kesehatan digital sering dievaluasi hanya berdasarkan efektivitas saja — apakah ukuran hasil membaik untuk orang-orang yang menggunakannya — sementara meninggalkan keempat dimensi lainnya tidak terukur atau tidak dilaporkan, yang secara sistematis membiaskan basis bukti ke arah intervensi yang bekerja dengan baik dalam kondisi skala-kecil yang ideal tetapi tidak mengatakan apa pun tentang apakah mereka bekerja dalam skala besar, menjangkau populasi yang paling membutuhkannya, atau bertahan melampaui pendanaan dan antusiasme awal mereka. RE-AIM dikembangkan khusus untuk memaksa evaluator melaporkan validitas eksternal (apakah ini akan berhasil di tempat lain, untuk siapa) bersama validitas internal (apakah ini berhasil di sini), yang sangat penting bagi siapa pun yang memutuskan apakah akan mendanai, menugaskan, atau menskalakan intervensi kesehatan digital berdasarkan hasil satu studi atau percontohan. Karena masing-masing dari lima dimensi dapat diukur baik pada tingkat individu maupun organisasi atau tempat, RE-AIM juga mengungkap pertukaran — misalnya, intervensi yang sangat efektif yang disampaikan oleh staf yang sangat terpilih dan sangat terlatih (efektivitas kuat, representasi adopsi lemah) — yang akan sepenuhnya disembunyikan oleh satu metrik gabungan.

Cara Diterapkan

Reach (Jangkauan)   = proporsi populasi target yang memenuhi syarat
                      yang berpartisipasi, dan seberapa representatif
                      peserta terhadap populasi yang memenuhi syarat
                      tersebut (bukan hanya jumlah peserta mentah)

Effectiveness       = dampak pada hasil utama, termasuk kualitas hidup
(Efektivitas)         dan konsekuensi negatif yang tidak diinginkan,
                      bukan hanya satu ukuran hasil utama tunggal

Adoption (Adopsi)   = proporsi dan representasi tempat dan staf/agen
                      penyampaian yang mengadopsi intervensi, relatif
                      terhadap semua tempat dan staf yang memenuhi
                      syarat

Implementation      = konsistensi dan kesetiaan penyampaian sesuai
(Implementasi)        yang dimaksudkan, waktu dan biaya yang
                      diperlukan untuk menyampaikannya, dan adaptasi
                      yang dibuat sepanjang jalan

Maintenance         = sejauh mana intervensi menjadi bagian dari
(Pemeliharaan)        praktik rutin jangka panjang, baik pada tingkat
                      individu (efek berkelanjutan tingkat individu)
                      maupun tempat/organisasi (institusionalisasi)

Contoh Perhitungan

Sebuah program pencegahan diabetes digital diujicobakan di 20 klinik perawatan primer di wilayah dengan total 200 klinik yang memenuhi syarat. Reach dinilai sebagai 1.200 dari perkiraan 15.000 pasien yang memenuhi syarat di 20 klinik percontohan (8%), dengan peserta ditemukan sedikit lebih muda dan lebih melek digital daripada populasi yang memenuhi syarat secara penuh — kesenjangan representasi yang patut dicatat daripada diabaikan. Effectiveness menunjukkan penurunan HbA1c rata-rata yang bermakna secara klinis di antara yang menyelesaikan, tetapi tingkat putus yang tinggi berarti efek ini diencerkan ketika dinilai berdasarkan niat-untuk-mengobati di seluruh semua pasien terdaftar, bukan hanya yang menyelesaikan. Adoption adalah 20 dari 200 klinik yang memenuhi syarat (10%), terkonsentrasi di klinik dengan infrastruktur digital yang ada di atas rata-rata — sekali lagi, kekhawatiran representasi. Penilaian kesetiaan Implementation menemukan sebagian besar klinik menyampaikan program sebagian besar seperti yang dirancang, meskipun dua klinik secara substansial memperpendek proses onboarding di bawah tekanan waktu. Penilaian Maintenance satu tahun setelah pendanaan percontohan berakhir menemukan hanya 6 dari 20 klinik asli yang masih aktif menjalankan program tersebut — hasil yang, jika dilaporkan bersama angka efektivitas awal yang menjanjikan, memberikan gambaran yang jauh lebih lengkap dan jujur tentang prospek dunia nyata program tersebut daripada yang akan diberikan data efektivitas saja.

Sumber Data dan Catatan Penting

Setiap dimensi RE-AIM biasanya mengandalkan sumber data yang berbeda: Reach dan Adoption dari catatan pendaftaran dan kelayakan, Effectiveness dari data klinis atau hasil (sering data yang sama yang sudah digunakan untuk menghitung metrik tertentu di tempat lain dalam buku ini, seperti tingkat perbaikan biometrik), Implementation dari daftar periksa kesetiaan, log penyampaian, atau observasi langsung, dan Maintenance dari penilaian tindak lanjut yang dilakukan jauh setelah periode evaluasi awal — yang berarti penilaian RE-AIM lengkap tidak dapat diselesaikan pada satu titik waktu dan memerlukan evaluasi yang direncanakan sejak awal, bukan ditambahkan secara retrospektif. Karena melaporkan semua lima dimensi secara jujur (termasuk hasil yang lemah pada beberapa) adalah lebih banyak pekerjaan dan kurang menyanjung daripada hanya melaporkan efektivitas, evaluasi kesehatan digital yang diterbitkan secara tidak proporsional kurang melaporkan Reach, Adoption, dan Maintenance dibandingkan dengan Effectiveness — pola bias publikasi yang diketahui yang harus diwaspadai siapa pun yang menggunakan bukti berlabel RE-AIM untuk menginformasikan keputusan.

Jebakan Umum

Melaporkan efektivitas saja dan menyebutnya evaluasi RE-AIM: menggunakan nama RE-AIM sambil hanya melaporkan satu dari lima dimensinya mengalahkan tujuan kerangka kerja dan tidak boleh digambarkan sebagai penilaian RE-AIM.
Mengukur Reach dan Adoption sebagai jumlah mentah daripada proporsi populasi yang memenuhi syarat: jumlah peserta mentah yang besar masih dapat mewakili sebagian kecil dan tidak representatif dari siapa yang seharusnya ideal dijangkau intervensi; selalu hitung terhadap penyebut yang memenuhi syarat secara penuh.
Menilai Maintenance terlalu dini: institusionalisasi dan efek berkelanjutan hanya dapat dinilai dengan baik jauh setelah pendanaan awal atau efek kebaruan memudar; penilaian yang diambil segera setelah percontohan berakhir tidak dapat berbicara tentang Maintenance terlepas dari bagaimana keempat dimensi lainnya terlihat.
Memperlakukan kelima dimensi sebagai berbobot sama atau dapat digabungkan menjadi satu skor: RE-AIM sengaja merupakan profil multi-dimensi, bukan satu angka; menggabungkan dimensi menjadi satu skor komposit membuang persis visibilitas pertukaran yang dirancang untuk dipertahankan kerangka kerja ini.

Sumber

Glasgow, Vogt, dan Boles, "Evaluating the public health impact of health promotion interventions: the RE-AIM framework", American Journal of Public Health, kerangka kerja asli yang diterbitkan
RE-AIM.org, sumber daya publik yang dipelihara kerangka kerja untuk ukuran, alat perencanaan, dan aplikasi yang diterbitkan
Literatur yang ditinjau sejawat yang menerapkan RE-AIM pada intervensi kesehatan digital secara khusus, misalnya studi yang diterbitkan di Journal of Medical Internet Research (JMIR) dan Translational Behavioral Medicine

Lihat juga: tingkat akses digital dan tingkat retensi pengguna, dua metrik dalam buku ini yang masing-masing memetakan erat ke dimensi Reach dan Maintenance RE-AIM.