آزمایش A/B
چرا این ابزار
وقتی دو گزینه دارید و بحث تمام نمی‌شود، آزمایش A/B بحث را تمام می‌کند: هر دو را هم‌زمان اجرا می‌کنید و می‌گذارید داده تصمیم بگیرد.
شرطش این است که فقط یک چیز فرق کند. اگر دو نسخه در سه چیز متفاوت باشند، نتیجه هرچه باشد، نمی‌دانید کدام تفاوت اثر داشته است.
در بیمارستان معمولاً به‌جای دو گروه تصادفی، دو بخش یا دو شیفت را مقایسه می‌کنند. این کار پذیرفتنی است، ولی دیگر آزمایش A/B به معنای دقیق نیست و مقایسه‌ای شبه‌آزمایشی است؛ باید مطمئن شوید بخش‌ها از پیش شبیه هم بوده‌اند، وگرنه تفاوتی را که به بخش مربوط است به مداخله نسبت می‌دهید.
پیش‌نیازها
- دو نسخه که فقط در یک چیز فرق دارند.
- شاخص از پیش تعریف‌شده و خط پایه.
- دو گروه مقایسه‌پذیر؛ و اگر مداخله به مراقبت بیمار مربوط است، مجوز کمیتهٔ اخلاق.
اجرا
- تفاوت واحد را مشخص کنید ۱۵ دقیقه
بنویسید دقیقاً چه چیزی بین دو نسخه فرق می‌کند. اگر بیش از یک چیز شد، آزمایش را به چند آزمایش جدا بشکنید.
- شاخص و مدت را از قبل بنویسید ۱۰ دقیقه
همراه با شرط توقف. بدون آن، تا وقتی نتیجهٔ دلخواه بیاید ادامه می‌دهید.
- مقایسه‌پذیری دو گروه را بررسی کنید ۱۰ دقیقه
حجم کار، ترکیب بیماران، سابقهٔ کارکنان. اگر متفاوت‌اند، تفاوت‌ها را ثبت کنید.
- هم‌زمان اجرا کنید دو تا چهار هفته
نه پشت سر هم؛ اجرای متوالی، اثر فصل و رویدادها را وارد نتیجه می‌کند.
- نتیجه را با خط پایه بسنجید ۳۰ دقیقه
و صادقانه بگویید: اگر تفاوت در حد نوسان معمول است، شواهدی برای اثر مداخله ندارید.
مثال بالینی — کنترل عفونت و مقاومت آنتی‌بیوتیکی
بخش الف فرم تازه گرفت و هم‌زمان یک کارگاه آموزشی هم برایش برگزار شد
بهبود دیده شد، ولی معلوم نیست از فرم بود یا از کارگاه.
هر دو بخش کارگاه یکسان دیدند؛ فقط بخش الف فرم علت تجویز داشت
فقط یک تفاوت وجود داشت و نتیجه استنادپذیر بود.
تفاوت ۴٪ بود با نوسان زیاد
تیم اعلام کرد شواهد کافی نیست؛ تصمیمی درست، هرچند نه دلخواه.
دام‌های رایج
- بیش از یک تفاوت نتیجه تفسیرناپذیر می‌شود.
- اجرای متوالی به‌جای هم‌زمان زمان خودش یک متغیر پنهان است.
- توقف وقتی نتیجه دلخواه شد شرط توقف باید از قبل نوشته شود.
- نادیده‌گرفتن تفاوت پایهٔ دو گروه اگر بخش‌ها از اول متفاوت بوده‌اند، مقایسه بی‌معناست.
خروجی
- محصول: نتیجهٔ دو نسخه با شاخص یکسان، خط پایه و یادداشت تفاوت‌های پایهٔ دو گروه.
- نشانهٔ آمادگی: بتوانید بگویید تنها تفاوت بین دو نسخه چه بود.
- گام بعد: ورودی تصمیم ادامه یا توقف، و دروازهٔ ۱۷ در نقشهٔ Innovation A to Z.