الموضوع 9 من 31· Also in this book
دقة توجيه الفرز
دقة توجيه الفرز هي نسبة لقاءات المرضى التي توجّه فيها أداة فرز آلية أو بمساعدة الذكاء الاصطناعي المريض توجيهًا صحيحًا إلى المستوى والمكان المناسبين من الرعاية، مثل الرعاية الذاتية أو الرعاية الأولية أو الرعاية العاجلة أو رعاية الطوارئ، بحسب ما يحكم به معيار مرجعي مُعتمَد سريريًا. وهي مقياس السلامة والفاعلية لأي بوابة أمامية رقمية أو أداة فحص أعراض أو نظام فرز بالذكاء الاصطناعي: إذ تقوم القيمة الجوهرية للأداة بأكملها على توجيه المرضى توجيهًا صحيحًا وسريعًا ومتسقًا.
لماذا يهم هذا الأمر
تتسبب أداة الفرز غير الدقيقة في ضرر في الاتجاهين: فالفرز الناقص (توجيه المريض إلى مستوى رعاية أدنى مما يحتاج) قد يؤخر علاج حالة طارئة حقيقية، بينما يهدر الفرز الزائد (توجيه المريض إلى مستوى رعاية أعلى مما يحتاج) سعة الطوارئ والرعاية العاجلة الشحيحة ويزيد الكلفة وقلق المريض دون منفعة سريرية. ولأن لنمطَي الإخفاق هذين عواقب مختلفة إلى هذا الحد، ينبغي دائمًا الإبلاغ عن دقة توجيه الفرز مقرونةً باتجاه الأخطاء، لا برقم دقة إجمالي واحد يحجب ما إذا كانت الأداة تخطئ بصورة آمنة أم خطرة. وتشترط الجهات التنظيمية والمنظومات الصحية التي تقيّم أداة فرز بالذكاء الاصطناعي لنشرها، على نحو متزايد، هذا النوع من الإبلاغ الطبقي عن الدقة شرطًا للموافقة السريرية، ولا سيما للأدوات التي تعمل بأي درجة من الاستقلالية عن الطبيب.
كيف يُحسب
دقة توجيه الفرز = اللقاءات الموجَّهة توجيهًا صحيحًا / إجمالي لقاءات
الفرز × 100
أبلِغ عن الفرز الناقص والفرز الزائد على حدة:
معدل الفرز الناقص = اللقاءات الموجَّهة إلى مستوى حدّة أدنى من المعيار
المرجعي / إجمالي لقاءات الفرز × 100
معدل الفرز الزائد = اللقاءات الموجَّهة إلى مستوى حدّة أعلى من المعيار
المرجعي / إجمالي لقاءات الفرز × 100
المعيار المرجعي هو عادةً مراجعة سريرية بأثر رجعي للحالة نفسها يجريها
طبيب، معمّاة عن مخرجات الأداة حيثما أمكن.
مثال محلول
تفرز أداة فحص أعراض بالذكاء الاصطناعي 5,000 لقاء مريض في شهر. وتجد مراجعة سريرية معمّاة لعينة عشوائية من 500 لقاء منها أن 430 لقاءً وُجّه إلى مستوى الحدّة الصحيح (دقة 86%)، وأن 45 لقاءً خضع لفرز ناقص (9%)، وأن 25 لقاءً خضع لفرز زائد (5%). ومعدل الفرز الناقص البالغ 9% هو الرقم الأحوج إلى التحقيق العاجل، لأنه يمثل لقاءات ربما وُجّه فيها المريض إلى رعاية أقل استعجالًا مما كان يحتاج فعلًا؛ أما معدل الفرز الزائد البالغ 5% فهو مصدر قلق يتعلق بالسعة والكلفة لا بالسلامة المباشرة.
مصادر البيانات والتحذيرات
للمعيار المرجعي الذي تُقاس به دقة الفرز أهمية بالغة: فمراجعة طبيب واحد تُدخل تفاوت حكمه الشخصي، ولذلك فإن رقم الدقة الموثوق يتطلب عادةً إما عدة مراجعين مستقلين مع اتفاق موثَّق بين المقيِّمين، أو المقارنة بنتيجة سريرية مؤكَّدة لاحقة (أي الرعاية التي احتاجها المريض فعلًا، وتتحدد بعد الواقعة). وللعينة أهميتها أيضًا: فمراجعة عينة ميسَّرة من اللقاءات، أو اللقاءات التي وُسمت بأنها غير معتادة فقط، لن تنتج رقمًا يمكن تعميمه على الأداء الكلي للأداة. وينبغي الإبلاغ عن أرقام الدقة على حدة بحسب فئة العرض أو الشكوى المقدَّمة حيثما تسمح بذلك أحجام الحالات الأساسية، لأن أدوات الفرز نادرًا ما تؤدي أداءً موحدًا عبر جميع الحالات.
الأخطاء الشائعة
- الإبلاغ عن رقم دقة مدمج واحد: إن دمج الفرز الناقص والفرز الزائد في رقم واحد يحجب ما إذا كانت أخطاء الأداة تميل نحو نمط الإخفاق الأخطر؛ أبلِغ عنهما دائمًا على حدة.
- استخدام مراجع واحد غير معمّى بوصفه المعيار المرجعي: قد يحيز ذلك رقم الدقة بصمت نحو ما كان سيفعله ذلك المراجع نفسه، بدلًا من معيار سريري مستقل.
- التحقق على بيانات بأثر رجعي ميسَّرة فقط: كثيرًا ما تختلف دقة توجيه الأداة في الواقع العملي عند مدخلات المرضى الحية الملتبسة اختلافًا جوهريًا عن دقتها على مجموعة تحقق منتقاة جُمعت في أثناء التطوير.
- تجاهل انحراف الأداء بعد النشر: قد تتراجع دقة نموذج الفرز بالذكاء الاصطناعي بمرور الوقت مع تغيّر الفئات السكانية أو الأعراض المقدَّمة أو توافر مسارات الرعاية؛ وينبغي إعادة قياس الدقة بصورة دورية لا التحقق منها مرة واحدة وافتراض ثباتها.
المصادر
- ONC / HealthIT.gov، إرشادات سلامة أدوات دعم القرار السريري والأدوات المعززة بالذكاء الاصطناعي وضمان جودتها
- الأدبيات المحكَّمة حول دقة أدوات فحص الأعراض وفرز المرضى بالذكاء الاصطناعي، مثل الدراسات المنشورة في JAMIA وnpj Digital Medicine وBMJ Health & Care Informatics
- NHS England، إرشادات السلامة السريرية لأدوات الفرز الرقمي والاستشارة عن بُعد (معياري إدارة المخاطر السريرية DCB0129/DCB0160)
انظر أيضًا: زمن إنجاز الإحالة الرقمية، وهو مقياس العملية الأوثق ارتباطًا بما يلي قرار الفرز مباشرةً.