غربالگری مشارکتکننده (Participant Screening) چیست؟
💡 این متن «بازنویسی آزاد» است: ایدهها و مفاهیم مطلب اصلی با نگارش کاملاً مستقل فارسی و مثالهای تازه بازگو شدهاند و ترجمهٔ کلمهبهکلمه نیست. بخشهای افزودهٔ مترجم در جعبهٔ منبع مشخص شدهاند.
فرض کنید برای تست یک اپ پرداخت قبض هشت نفر را دعوت کردهاید. هر هشت نفر در فرم نوشتهاند که قبضهایشان را هر ماه آنلاین میپردازند. جلسهها خوب پیش میرود و تقریباً هیچکس جایی گیر نمیکند.
بعد از انتشار، تماسهای پشتیبانی بالا میرود. معلوم میشود نیمی از آن هشت نفر دوست و همکار تیم بودهاند و بقیه جواب درست را از خود پرسش حدس زده بودند. مشکل در جلسهها نبود. مشکل در چند پرسشی بود که تعیین کرد چه کسی وارد اتاق شود.
غربالگری مشارکتکننده چیست؟
غربالگری مشارکتکننده یعنی صافیای که پیش از هر پژوهش کاربر میگذاریم تا فقط آدمهای مناسب وارد مطالعه شوند. ابزار اصلیاش یک پرسشنامهٔ کوتاه است که به آن غربالگر (Screener) میگویند.
غربالگری با جذب مشارکتکننده فرق دارد. جذب میپرسد آدمها را از کجا پیدا کنیم. غربالگری میپرسد از میان کسانی که پیدا شدهاند، کدامها بمانند.
منبع برای اهمیت این کار چند دلیل میآورد، از مرتبط بودن یافتهها تا معنادار شدن مقایسهٔ گروهها. به نظر من همهشان به یک جمله برمیگردند: هیچ روش پژوهشی از آدم اشتباه دادهٔ درست بیرون نمیکشد.
در مصاحبهٔ کاربر گفتیم که مصاحبه با فرد اشتباه از مصاحبهنکردن بدتر است، چون اطمینان کاذب میدهد. اینجا میخواهیم ببینیم آن فرد اشتباه دقیقاً از کدام درز وارد میشود.
معیار را از رفتار بسازید
وسوسهٔ همیشگی این است که معیار را با سن و جنسیت و شهر تعریف کنیم، چون اینها سادهاند و در هر فرمی جا دارند.
منبع پیشنهاد میکند بهجای جمعیتشناسی، رواننگاری (Psychographics) را معیار بگیرید. یعنی رفتار و تجربه و نگرش آدمها. من در عمل یک قدم جلوتر میروم و تا جای ممکن فقط رفتار را معیار میگیرم. نگرش را هم آدمها به دلخواه گزارش میکنند.
چهار نوع معیار رفتاری بیشتر از بقیه به کار میآیند:
- - آشنایی: تازهکار است یا کهنهکار؟ کسی که اولین بار اپ را باز میکند، مشکلاتی را میبیند که کاربر قدیمی دیگر نمیبیند.
- - شیوهٔ استفاده: برای چه کاری سراغ محصول میآید؟ دو نفر ممکن است هر روز یک اپ را باز کنند و هدفشان کاملاً فرق کند.
- - بسامد: گاهبهگاه استفاده میکند یا هر روز؟ کاربر پرتکرار میانبرها را بلد است. کاربر گاهبهگاه هر بار از نو یاد میگیرد.
- - بافت: در خانه، سر کار یا در مترو؟ محصولی که در تاکسی به کار میرود، با یک دست و در نور بد استفاده میشود.
جمعیتشناسی را کنار نگذارید، ولی جایش را عوض کنید. سن و شهر معمولاً معیار ورود نیستند. ابزاریاند برای اینکه نمونهتان یکدست نشود.
اگر پرسونا دارید، از آنها معیار بسازید. ولی رفتار پرسونا را بردارید، نه عکس و سن و شغلش را. پرسونا بخشبندی بازار نیست و غربالگر هم نباید باشد.
پرسشی که جواب درست را لو ندهد
منبع روی یک اصل تأکید میکند: پرسش غربالگر نباید جهتدار باشد. اگر بپرسید «آیا اینستاگرام جای خوبی برای خرید لباس است؟»، جواب را در خود پرسش گذاشتهاید. «معمولاً لباس را از کجا میخرید؟» همان اطلاعات را بدون فشار میگیرد.
ولی غربالگر خطر دیگری هم دارد که از جهتداری مهمتر است. مشارکتکننده میداند که پشت این فرم پاداشی هست. پس اگر بفهمد کدام جواب قبولش میکند، همان را انتخاب میکند.
Kathryn Whitenton از گروه نیلسن نورمن این را کشمکش دو هدف میداند. پرسش باید اطلاعات دقیق بگیرد و در عین حال موضوع مطالعه را لو ندهد.
نمودار بالای صفحه دو راه پرسیدن یک چیز را کنار هم گذاشته است. پرسش سمت چپ بله و خیر دارد و هر کسی میفهمد که «بله» درِ ورود است. پرسش سمت راست همان را میان چند گزینهٔ واقعی پنهان میکند. چند قاعده این پنهانکاری را ممکن میکند:
- - گزینهٔ انحرافی باورپذیر: اگر دنبال کاربر تاکسی اینترنتی هستید، بپرسید در ماه گذشته با چه وسیلهای جابهجا شدهاند. مترو و اتوبوس و خودروی شخصی و تاکسی اینترنتی را کنار هم بگذارید. گزینهٔ بیربطی مثل «بالن» فقط پرسش را مشکوک میکند.
- - بازه بهجای بله و خیر: بهجای «هر هفته استفاده میکنید؟» بپرسید در یک ماه گذشته چند بار. بازهٔ قبولشده را هم وسط فهرست بگذارید، نه در انتها.
- - گذشتهٔ مشخص، نه عادت کلی: «آخرین بار کی…» از «معمولاً…» صادقانهتر جواب میگیرد. اولی خاطره است و دومی تصویری که آدم از خودش دارد.
- - پرسش باز برای شغل: بهجای فهرست شغلهای ممنوع، بپرسید «کارتان چیست؟». اگر فهرست بدهید، طراح و بازاریاب میفهمند کدام گزینه را تیک نزنند.
به گفتهٔ Whitenton، کسی که همهٔ گزینهها را تیک میزند احتمالاً بیشتر مشتاق است تا صادق.
پرسش حذفی و پرسش سهمیهای
پرسشهای غربالگر دو نقش متفاوت دارند.
پرسش حذفی (Knock-out) شرطی است که بدون آن اصلاً نمیشود مشارکتکننده بود. کسی که هیچوقت خرید آنلاین نکرده، به کار تست سبد خرید نمیآید. جواب نادرست به این پرسش، غربالگر را همانجا تمام میکند.
پرسش سهمیهای (Quota) کسی را حذف نمیکند. فقط میگوید از هر گروه چند نفر لازم است. مثلاً نیمی تازهکار و نیمی کهنهکار، یا چند نفر از بیرون پایتخت. وقتی سهم یک گروه پر شد، بقیهٔ آن گروه به فهرست ذخیره میروند.
خطای رایج این است که همهچیز را حذفی کنیم. هر پرسش حذفی تازه، جمعیت واجد شرایط را کوچکتر میکند. اگر پنج شرط سخت را پشت هم بچینید، شاید از کل فهرستتان چند نفر بیشتر نماند.
این همان بدهبستان غربالگر تنگ و سرعت جذب است. من معمولاً فقط شرطهایی را حذفی میکنم که بدونشان کل جلسه بیمعنا میشود. بقیه را سهمیه میکنم.
پرسشهای حذفی را اول فرم میگذارم تا وقت کسی هدر نرود، ولی با ظاهری مثل بقیه تا معلوم نشود کدام سرنوشتساز است.
کجا پیدایشان کنیم و با پاسخها چه کنیم
منبع پنج کانال جذب را مقایسه میکند: آژانس، سکوی خودکار، کاربران فعلی، جذب از راهرو به سبک آزمون چریکی، و شبکههای اجتماعی. قاعدهٔ کلی ساده است. هرچه کانال ارزانتر باشد، غربالگری سنگینتری لازم دارد.
بعد از جمع شدن پاسخها، منبع پیشنهاد میکند هر پاسخ را بر اساس تناسبش با هدف پژوهش امتیاز بدهید. از هر نفر یک نیمرخ کوتاه بسازید و آن را با نیاز مطالعه مقایسه کنید. چند نفر را هم بهعنوان ذخیره (Floater) نگه دارید. اینها کسانیاند که تقریباً مناسباند و اگر کسی نیامد جایش را میگیرند.
پاسخهایی را که بیش از حد خوباند جدی بگیرید. منبع دو نشانه میدهد. اولی پاسخ یکنواخت (Straightlining) است، یعنی کسی که در همهٔ مقیاسها یک گزینه را زده. دومی نیمرخی است که در همهٔ ابعاد عالی است.
کسی که هم از همه کهنهکارتر است، هم از همه بیشتر استفاده میکند و هم همهٔ امکانات را میشناسد، احتمالاً فرم را برای قبول شدن پر کرده است.
مشارکتکنندهٔ حرفهای مسئلهٔ جداگانهای است. کسی که پشت سر هم در مطالعهها شرکت میکند، یاد گرفته غربالگر را رد کند و در جلسه «مشارکتکنندهٔ خوب» باشد. یک پرسش ساده دربارهٔ آخرین باری که در پژوهشی شرکت کرده، بیشترشان را کنار میگذارد.
آخرین صافی یک تماس کوتاه است. منبع آن را برای هماهنگی زمان و پاداش و رضایتنامه میخواهد، و من برای راستیآزمایی هم. یک پرسش باز دربارهٔ آخرین باری که آن کار را کردهاند، در دو دقیقه نشان میدهد پاسخ فرم واقعی بوده یا نه.
منبع برای پژوهش دسترسپذیری هم نکتههای جداگانهای دارد. خود غربالگر باید با صفحهخوان پرشدنی باشد و جذب از راه انجمنها و گروههای حمایتی انجام شود. اگر کاربر نابینا نتواند فرم شما را پر کند، غربالگر پیش از هر پرسشی او را حذف کرده است. این را در طراحی فراگیر بیشتر باز کردهایم.
در کار کیفی دنبال چند نفر با تجربهٔ غنی و دیدگاه متفاوتید. در پژوهش کمی ولی نمونه باید نمایندهٔ جمعیت باشد و شرطها سختگیرانه و یکسان اجرا شوند.
غربالگر بد، یافتهها را بیصدا کج میکند
این بخش در منبع نیست. منبع خطر جذب نامناسب را میگوید، ولی نمیگوید این خطا چطور پنهان میماند.
بیشتر خطاهای پژوهش در خود جلسه دیده میشوند. پرسش جهتدار در متن مصاحبه پیداست. خطای غربالگر ولی در هیچ ضبطی نیست، چون پیش از شروع جلسه اتفاق افتاده است.
فرض کنید کاربران یک اپ را از کماستفاده تا پراستفاده کنار هم بچینیم. غربالگری که شرط «استفادهٔ روزانه» را حذفی کرده، فقط یک باریکه از انتهای این طیف را وارد اتاق میکند.
حالا هر یافتهای از همین باریکه میآید. این آدمها شروع کار با اپ را مدتها پیش پشت سر گذاشتهاند. پس در تست هیچ مشکلی در شروع کار نمیبینند و گزارش مینویسد «ورود کاربر مشکلی ندارد». این جمله دربارهٔ آن باریکه درست است، ولی دربارهٔ محصول نه.
بدتر اینکه هیچ نشانهای از خطا در گزارش نیست. نمونهٔ یکدست همیشه نتیجهٔ منسجم میدهد، و ما انسجام را معمولاً نشانهٔ درستی میگیریم.
این همان سوگیری انتخاب است که در سوگیری در طراحی دیدیم. فرقش این است که اینجا خودمان آن را با یک فرم ساختهایم. سه عادت جلویش را میگیرد:
- - معیار را در گزارش بنویسید: هر یافته باید بگوید از چه کسانی آمده. «ورود مشکلی ندارد، برای کاربران روزانه» جملهٔ دیگری است.
- - یک سهمیهٔ مرزی بگذارید: یکی دو نفر را از بیرون باریکهٔ اصلی بیاورید. اگر یافتههایشان فرق کرد، مرز غربالگر را پیدا کردهاید.
- - غربالگر را پیش از انتشار بیازمایید: یک همکار آن را پر کند و بگوید حدس میزند دنبال چه کسی هستید. اگر درست حدس زد، مشارکتکننده هم حدس میزند.
در بافت فارسی
در روشهای پژوهش از دور دیدیم که جذب از تلگرام و اینستاگرام به سمت دنبالکنندگان خود شما میلغزد. پرداخت پاداش هم آنجا مسیر محلی میخواست. اینجا پنج نکته میماند که به خود غربالگر مربوطاند.
یک: غربالگر در گروههای تلگرامی دستبهدست میشود. لینک فرم را که در یک گروه بگذارید، به گروههای دیگر هم میرسد. گاهی راهنمایی هم همراهش میرود: «اینطوری جواب بدی قبول میشی». پس پنهان کردن جواب درست اینجا مهمتر است. برای هر کانال هم لینک جدایی بسازید.
دو: «بله» همیشه بله نیست. تعارف و میل به کمک باعث میشود بعضیها به هر پرسش بله و خیر جواب مثبت بدهند. برای بعضی هم جواب منفی یعنی رد کردن درخواست یک آشنا. بازهها و پرسشهای «آخرین بار کی» اینجا از هر جای دیگری کارسازترند.
سه: شمارهٔ کارت را در غربالگر نخواهید. وقتی پاداش کارت به کارت پرداخت میشود، وسوسه میشویم شمارهٔ کارت را همان اول بگیریم. این کار دادهٔ حساس کسانی را جمع میکند که هرگز انتخاب نمیشوند. اطلاعات پرداخت را فقط از منتخبها و بعد از جلسه بگیرید. منبع هم میگوید فقط دادهٔ لازم را جمع کنید.
چهار: شهر را سهمیه کنید، نه شرط. اگر فقط جلسهٔ حضوری در تهران بگذارید، غربالگر بیآنکه چیزی بپرسد بقیهٔ کشور را حذف کرده است. برای شهرهای دیگر سهمیه بگذارید و جلسه را از دور برگزار کنید. برای کاربری که اینترنت پایداری ندارد، تماس تلفنی هم یک راه است.
پنج: عدد و تاریخ را ساده بپرسید. فرمی که فقط رقم لاتین قبول کند، بخشی از پاسخدهندهها را همان اول دلسرد میکند. تاریخ دقیق هم نپرسید، چون پاسخدهنده به تقویم شمسی فکر میکند. بازهٔ نسبی مثل «هفتهٔ گذشته» هم این مشکل را حل میکند و هم صادقانهتر است.
جمعبندی
غربالگری تعیین میکند چه کسی وارد اتاق شود، و معیارش باید رفتار باشد، نه سن و شهر. پرسش خوب غربالگر جواب درست را لو نمیدهد. فقط شرطهای ضروری را حذفی کنید و بقیه را سهمیه.
مهمتر از همه، خطای غربالگر در هیچ ضبطی پیدا نمیشود. فقط در یافتههایی دیده میشود که بیش از حد منسجماند.
اگر بخواهم یک پرسش بگذارم: اگر غربالگر آخرین پژوهشتان را به یک همکار بدهید، چقدر طول میکشد تا بفهمد دنبال چه کسی بودید؟
منبع
این نوشته «بازنویسی آزاد» است از موضوع Participant Screening منتشرشده در وبسایت بنیاد طراحی تعامل (Interaction Design Foundation — IxDF؛ بدون نام نویسندهٔ مشخص)، با ویدئوهایی از William Hudson و Frank Spillers. مفاهیم پایهٔ برگرفته از این منبع — تعریف غربالگری بهعنوان صافی مشارکتکننده با پرسشنامهٔ غربالگر، دلیلهای اهمیت آن، ترجیح رواننگاری بر جمعیتشناسی و چهار معیار آشنایی و شیوهٔ استفاده و بسامد و بافت، پرهیز از پرسش جهتدار، پنج کانال جذب و بدهبستان هرکدام، امتیازدهی پاسخها و ساختن نیمرخ و نگهداشتن ذخیره، پاسخ یکنواخت و نیمرخ بیش از حد عالی، هماهنگی و راستیآزمایی با منتخبها، نکتههای جذب برای پژوهش دسترسپذیری، فرق غربالگری کیفی و کمی، و جمع کردن فقط دادهٔ لازم — از این منبع گرفته شده، اما متن فارسی و مثالها کاملاً مستقل نوشته شدهاند.
متن مقالهٔ اصلی تحت هیچ لایسنس بازی منتشر نشده است؛ به همین دلیل اینجا ترجمهٔ کلمهبهکلمه ارائه نشده و متن کامل انگلیسی (بههمراه همهٔ تصاویر) در لینک زیر در دسترس است.
ارجاع بیرونی: کشمکش میان گرفتن اطلاعات دقیق و لو ندادن موضوع مطالعه، گزینههای انحرافی باورپذیر، پرسش باز برای شغل، و نشانهٔ هشدارِ تیک زدن همهٔ گزینهها از مقالهٔ How to Use Screening Questions to Select the Right Participants for User Research نوشتهٔ Kathryn Whitenton در Nielsen Norman Group (۲۰۱۹) است. منبع این مقاله را نام نمیبرد.
بخشهای افزودهٔ مترجم: نمونهٔ آغازین اپ پرداخت قبض؛ تفکیک غربالگری از جذب؛ ترجیح رفتار حتی بر نگرش، و جای تازهٔ جمعیتشناسی بهعنوان ابزار تنوع؛ خطر لو رفتن جواب قبولشده و چهار قاعدهٔ پنهانکاری شامل گزینهٔ انحرافی، بازه بهجای بله و خیر، پرسش از گذشتهٔ مشخص و پرسش باز برای شغل؛ کل بخش «پرسش حذفی و پرسش سهمیهای» شامل بدهبستان غربالگر تنگ و سرعت جذب و جای پرسشهای حذفی در فرم؛ مشارکتکنندهٔ حرفهای و پرسش دربارهٔ آخرین مشارکت؛ استفاده از تماس کوتاه برای راستیآزمایی؛ کل بخش «غربالگر بد، یافتهها را بیصدا کج میکند» شامل پنهان ماندن خطا در ضبطها، نمودار باریکهٔ طیف کاربران، انسجام کاذب یافتهها و سه عادت پیشگیری؛ و کل بخش «در بافت فارسی» شامل دستبهدست شدن فرم در گروههای تلگرامی، بلهٔ تعارفی، نخواستن شمارهٔ کارت در غربالگر، سهمیهٔ شهرهای دیگر، و پرسیدن سادهٔ عدد و تاریخ.
تصاویر: تصاویر منبع اصلی ترکیبی از چند مجوزند. دو تصویر بنیاد طراحی تعامل با CC BY-SA 4.0، یک نمودار با CC BY-NC-SA 3.0، یک عکس با CC BY-NC-ND 2.0 و چند عکس با مجوز تجاری Envato Elements منتشر شدهاند. هر سه نمودار این صفحه طراحی اختصاصی مترجم است و هیچ تصویری از منبع اصلی بازتولید نشده است.
مشاهدهٔ مقالهٔ اصلی
غربالگری مشارکتکننده