주제 30 / 31· Also in this book
환자 참여 일관성 비율
환자 참여 일관성 비율은 등록 환자가 시간에 걸쳐 디지털 헬스 제품과 얼마나 규칙적으로 상호작용하는지—예를 들어 식사나 증상을 기록하거나, 신체 활동을 기록하거나, 건강 데이터를 조회하는지—를 측정하며, 단순히 그것을 전혀 사용했는지 여부가 아니다. 이는 단일 시점의 활성 사용 횟수와는 구별되는 종단적 지표다: 두 환자가 "이번 달 앱 사용함"이라는 동일한 상태를 가질 수 있지만, 한 명은 매일 일관되게 기록하고 다른 한 명은 한 번 기록하고 3주 동안 사라지며, 일관성 지표만이 이 둘을 구별한다.
왜 중요한가
디지털 헬스 도구와의 지속적이고 규칙적인 상호작용은 임상적 이점에 대한 더 신뢰할 수 있는 선행 지표 중 하나이며, 특히 당뇨병, 체중 관리, 정신 건강과 같이 행동에 의존하는 질환의 경우 더욱 그렇다. 이러한 질환에서 도구의 가치는 단일 세션이 아니라 그것이 뒷받침하는 습관에서 나온다. 한 제품은 건강한 월간 활성 사용자 수를 보고하면서도 실제로는 한 번 로그인하고 멀어지는 모집단에 서비스하고 있을 수 있다. 월간 활성 사용은 해당 월 내 사용 패턴에 대해 아무것도 말해주지 않는 낮은 기준이기 때문이다. 일관성 지표는 단순한 활동 집계로는 할 수 없는 방식으로 이를 포착한다. 일관성은 또한 몇 주가 아니라 몇 달에 걸쳐 유지하기 더 어려운 것 중 하나이므로, 온보딩 직후 참신함 효과에 취약한 단기 참여도 수치보다 제품 품질과 임상적 적합성에 대한 더 정직한 신호다.
계산 방법
참여 일관성 비율 = 최소 하나의 자격 있는 상호작용이 있었던
주 수 / 등록된 총 주 수 × 100
"자격 있는 상호작용"은 명시적이고 일관되게 정의되어야 한다
(예: 식사 기록 항목, 증상 체크인, 또는 완료된 활동 동기화)
— 기록된 조치 없이 앱을 여는 것과 같은 수동적 이벤트는
절대 아니다.
모집단 평균만이 아니라 분포로 보고:
예: 주간 일관성이 80% 이상인 환자 비율, 50-79%인 비율,
50% 미만인 비율
계산 예시
한 영양 코칭 앱이 환자를 12주 동안 등록한다. 그 환자는 이 12주 중 9주 동안 최소 하나의 자격 있는 식사 항목을 기록하여, 개별 참여 일관성 비율은 9 / 12 × 100 = 75%다. 최소 12주 동안 등록된 앱의 전체 2,000명 환자 코호트에서, 600명의 환자(30%)가 80% 이상의 주간 일관성을 유지하고, 900명(45%)은 50-79% 구간에 속하며, 500명(25%)은 50% 미만으로 떨어진다. 코호트 평균(약 65%에 해당할 수 있음)만 보고하면 환자의 전체 4분의 1이 거의 참여하지 않고 있다는 사실이 가려질 것이다—이는 전체 평균에 희석되기보다 별도로 조사할 가치가 있는 세그먼트다.
데이터 출처 및 주의사항
일관성 데이터는 제품 자체의 이벤트 로그(식사 항목, 활동 동기화, 체크인)에서 나오며, "자격 있는 상호작용"의 정의는 결과 비율에 엄청난 영향을 미친다—관대한 정의(어떤 앱 열기든)는 항상 엄격한 정의(완료된 의미 있는 기록 항목)보다 더 좋아 보일 것이므로, 사용된 정의는 보고된 수치와 함께 명확하게 명시되어야 한다. 자동으로 동기화된 데이터(예: 백그라운드에서 활동을 동기화하는 연결된 피트니스 트래커)는 수동으로 기록된 데이터와 별도로 보고되어야 한다. 자동 동기화는 환자의 적극적인 노력이나 제품 지침과의 참여를 반영하지 않으면서도 겉보기 일관성을 부풀릴 수 있기 때문이다.
함정
- 앱 열기를 의미 있는 참여와 혼동: 수동적 앱 열기(예: 푸시 알림에 의해 트리거됨)는 기록된 식사 항목이나 완료된 체크인과 같지 않다. 자격 있는 상호작용만 정의하고 보고해야 한다.
- 모집단 평균만 보고: 건강해 보이는 평균 일관성 비율은 매우 참여도가 높은 환자와 거의 전혀 참여하지 않는 환자의 이봉 모집단을 가릴 수 있다. 평균만이 아니라 일관성 구간에 걸친 분포를 보고해야 한다.
- 등록 기간 분모 무시: 등록 기간을 고려하지 않고 매우 다른 길이로 등록된 환자 간 일관성 비율을 비교하면 더 짧고 유지하기 쉬운 측정 창을 가진 그룹 쪽으로 편향될 것이다.
- 자동 백그라운드 동기화가 비율을 부풀림: 수동적으로 동기화된 웨어러블 데이터 스트림은 환자 측의 실제 행동 변화나 제품 참여 없이도 참여하지 않는 환자를 지속적으로 활동적인 것처럼 보이게 만들 수 있다.
출처
- 디지털 헬스 참여 패턴과 임상 결과와의 관계에 관한 동료 심사 문헌, 예를 들어 Journal of Medical Internet Research(JMIR)에 게재된 연구
- American Medical Informatics Association(AMIA), 환자 생성 건강 데이터 품질 및 참여도 측정에 관한 지침
- Digital Therapeutics Alliance, 디지털 치료제의 참여도 및 결과 측정에 관한 모범 사례 지침
참고: 사용자 유지율, 등록 중 얼마나 일관되게 참여하는지와는 구별되는, 환자가 전혀 등록 상태를 유지하는지에 관한 밀접하게 관련된 지표.