10 نکته که باید قبل از اجرای آزمون آنلاین و حضوری بدانید!

10. ترتیب ارائه پرسشنامه ها
اغلب در یک پژوهش چندین تا پرسشنامه با هم اجرا می شه. این پرسشنامه ها هر کدومشون یه متغیری را اندازه گیری می کنند. مثلا یکی متغیر وابسته (اسم دیگه اش ملاک هست) یکی دیگه متغیر مستقل (اسم دیگه اش متغیر پیش بین هست) و دیگری متغیر واسطه ای (میانجی)، کنترل یا تعدیل کننده را اندازه گیری می کند.
خب این یعنی چی؟ وقتی ما چندین تا پرسشنامه داشته باشیم و تعداد سوالات زیاد باشند، کسانی که قرار هست به پرسشنامه شما پاسخ بدهند خسته می شوند، بنابراین اولین پرسشنامه ها را خوب پاسخ می دهند و آخرین پرسشنامه ها را سرسری پاسخ می دهند.
این خودش باعث می شه نمره های بدست آمده از آزمون های آخر این قدر بد باشه که وقتی برای مثال همبستگی بین دوتا متغیرتون را بررسی می کنید (خودمونی بگم فرضیه های پژوهشتون تایید نمی شوند)، هیچ رابطه ای را نشون نمیده!
اما راهکار چیه و چکارش می شه کرد. قانون اولیه این هست که همیشه پرسشنامه متغیر وابسته را اول از همه اجرا کنید (رو سایت به عنوان اولین پرسشنامه به کسی که قرار هست پاسخ بده نشون داده بشه)، چون اگر اون خراب باشه دیگه هیچ متغیری کارآیی نداره. متغیرهای مستقل را هم بگذارید آخرین پرسشنامه ها چون اگر یکی از این متغیرهای مستقل خوب نباشند می شه کنارش گذاشت و به کل پژوهش آسیب نمی خوره.
اگر پرسشنامه هایی هم دارید که نقش متغیر واسطه را بازی می کنند، بهتره بعد از پرسشنامه متغیر وابسته یا ملاک ارائه بشه.
اما این راهکار چقدر جواب میده. تا حدود 80 درصد از مشکلات شما را در این مورد حل می کند. اما بهترین حالت این هست که پرسشنامه متغیر وابسته همیشه اول برگزار بشه و سایر پرسشنامه ها به صورت تصادفی به افراد داده بشه. برای مثال اگر 4 تا پرسشنامه دارید. ابتدا پرسشنامه شماره 4 که متغیر وابسته هست را بدهید و بعد اون سه پرسشنامه را به یکی به ترتیب 1، 3، 2 بدهید به نفر بعدی 3، 2، 1 و نفرات بعدی 2، 1، 3 و هر چندتا حالت که ممکنه. متاسفانه این کار در حالتی که پرسشنامه ها را حضوری جمع آوری می کنیم امکان پذیر هست ولی در وب سایت هایی که داده جمع آوری می کنند مثل پرس لاین و اول فرم وجود نداره.
9. اطلاعات جمعیت شناختی مهم و حساس را اول پرسشنامه نپرسید!
موضوع بعدی که اهمیت داره این هست که اگر دارید داده ای جمع آوری می کنید که حساسیت خاصی در گروهی که پرسشنامه را قرار هست روی اونها اجرا کنید وجود داره، لطفا سوال هایی که اطلاعات مهمی را اندازه گیری می کنه را در آخرین بخش قرار بدهید.
برای مثال وقتی نقش وضعیت اجتماعی (سطح تحصیلات) -اقتصادی (درآمد، خودرو و …) را در رابطه با موفقیت شغلی یا تحصیلی اندازه گیری می کنید، اغلب موجب می شود افراد خودشون را بهتر از چیزی که هستند نشون بدهند یا پاسخ ندهند.
اما این وضعیت وقتی بدتر می شه که این سوالات اول پرسشنامه شما باشند و بعد فرد بخواهد به پرسشنامه های شما هم پاسخ بدهد. شک نکنید که گند میزنه به پاسخ هایی که به پرسشنامه ها قرار هست بده.
راهکار: سوالات مهم و حساس را در آخرین بخش پرسشنامه بگذارید.
8. لینک آنلاین پرسشنامه هاتون را خواهشا در گروه های فامیلی ارسال نکنید!
خیلی وقت ها پرسشنامه هایی که آنلاین ساخته می شه چون کسی بهش پاسخ نمی دهد، از بقال سرکوچه گرفته تا همسایه و دوستان و … خواسته می شه که به پرسشنامه ها پاسخ بدهند. این کار اشتباه هست. 🙂
جامعه هدف پژوهش ما افراد خاصی هستند، این کار موجب می شود که حتی اگر کسانی بخواهند به شما پاسخ بدهند خود را خیلی مطلوب نشان بدهند. معنی اش این هست که همه تلاش می کنند خودشون را بهتر یا بدتر از اون چیزی که هستند نشون بدهند.
نتیجه چنین کاری می شود عدم تایید فرضیه شما و نتیجه گیری و استنباط غلط از نتایج پژوهش. مثل این هایی که هر از گاهی میان می گن نصف ایران مشکل روانی دارند. شیوع شناسی یه موضوع تخصصی هست که به این آسونی ها نیست.
بهتره که از کسانی که متخصص کسب و کار هستند در خصوص این که افراد در هر گروهی چه ویژگی هایی دارند کسب اطلاع کنید. برای مثال در گروه مادران دانش آموزان همیشه با هدف اطلاع رسانی هست. از این افراد نباید درخواست کرد به پرسشنامه مشکلات اقتصادی پاسخ بدهند، اما می توانید به آنها پرسشنامه مشکلات رفتاری نوجوانان را بدهید چون دغدغه آنها فرزندانشان هست.
راهکار: در گروه های آشنا اصلا پرسشنامه اجرا نکنید و گروه های هدف را با جستجو پیدا کنید. مبلغ اندکی پرداخت کنید و لینک پرسشنامه را در آن گروه ارائه بدهید.
7. من 1000 تا پرسشنامه آنلاین جمع کردم ولی وقتی تحلیل آماری می کنم عجیب خرابه نتایج!
پیرو بخش قبل یادمون نره که حجم نمونه اگر 10000 نفر هم باشه بازم همین نتیجه گرفته می شه. اما چرا این اتفاق می افته.
عدم تعریف صحیح جامعه آماری امان و عدم تدوین جدول نمونه گیری قبل از این که بخواهیم پرسشنامه را اجرا کنیم. اما اینها یعنی چی و چکارش می شه کرد.
بگذارید یه مثال بزنم. مثلا فرض کنید می خواهید یه آزمون هوش بسازید. اول مشخص کنید هوش از چه متغیرهایی تاثیر می گیره. برای مثال بین دختر و پسر در هوش تفاوت هایی وجود داره. دخترها طبق مطالعات انجام شده و منتشر شده از نظر پردازش دیداری-فضایی (یعنی اینکه بتونه یه چیزی را به صورت چند بعدی در ذهنش بچرخونه) نمره کمتری می گیرند ولی در مهارت های کلامی نمره بالاتری. این یعنی حتما باید در گروهی که آزمون هوش روی اونها اجرا می شه دختر باشه و پسر هم باشه.
این را هم می دونیم که هوش در سنین مختلف فرق داره. تحصیلات می تونه روی نمره هوش تاثیر بگذاره، افراد با طبقه اقتصادی مختلف هم باید در نظر گرفته بشه.
اما آزمون هوش که فقط برای این افراد نیست. بیشتر جنبه تشخیصی داره و روان شناس ها برای تشخیص مشکلات شناختی از اون استفاده می کنند. پس افراد تیز هوش، افراد استثنایی داری عقب ماندگی ذهنی و … چی می شوند.
بنابراین اگر جدول نمونه گیری نداشته باشید که چند نفر و از چه گروه سنی، با چه جنسیتی، چه تحصیلاتی و چه طبقه اجتماعی و …. باید در مطالعه شما شرکت کنند کلا این قصه پژوهش کردن شما سرانجامی نداره.
اینطوری هست که هزینه کردید پژوهش کنید ولی این ره که ما می رویم به ترکستان 🙂 است.
نمونه معرف یعنی این که 500 تا باشه ولی از همه کسانی که باید در مطالعه شرکت کنند نه 1000 تا آدم شبیه به هم.
نتیجه پژوهشی وقتی خیلی عالی میشه که از کل جامعه امان در نمونه گیری ما باشه.
راهکار: تهیه جدول نمونه گیری و تعریف صحیح جامعه هدف، و برآورد کردن حجم نمونه از روش های مناسب.
6. آزمودنی چه انگیزه ای داره که بخواهد به پرسشنامه های ما پاسخ بدهد؟
شاید باورتون نشه، ولی روزی نیست که یه لینک پرسشنامه برای من ارسال نشه و از من نخواهند که به اون پاسخ بدهم.
برخی از دوستان خیلی محبت دارند، اما ما را در رودربایستی قرار می دهند. در حالی که اصلا من جامعه هدف اون ها نیستم، ولی با تلاش خستگی ناپذیری پیگیری می کنند.
آزمودنی اگر دلیلی برای پاسخ دهی نداشته باشه، به هیچ عنوان کمکی به شما نمی کنه فقط کلی داده نامناسب تحویل شما می دهد.
در ایران تجربه ام می گه افراد بعضا به این دلیل که نمی توانند نه بگویند به پرسشنامه شما پاسخ می دهند، در حالی که بدون مطالعه و سرسری پاسخ داده اند.
شاید از خودتون بپرسید چطور ممکنه! وقتی که داده ها تجزیه و تحلیل می شوند شیوه هایی هست که می شه متوجه شد کی خوب پاسخ نداده است. و این گونه هست که هزینه شده و داده ای جمع آوری شده ولی کارآیی نداره.
راهکار: خدایی به کسی که نمی خواهد به پرسشنامه جواب بده، گیر ندهید.
خب چکار کنیم. پاسخ در سوال هست. انگیزه ایجاد کنید. اما چطوری؟
- در این خصوص اول از همه خودتون را معرفی کنید. بگید که با چه هدفی این کار را انجام می دهید و برای کار پایان نامه اتان هست. افراد دلشون به حال دانشجو ها می سوزه. البته برای همه اینطوری نیست.
- اگر ممکنه در پلتفرم ها نتایج به دست آمده از تست را ارائه بدهید. خود نتیجه تست می تونه انگیزه ایجاد کنه.
- در ازای انجام کار مبلغی پرداخت کنید. البته اینطوری نباشه که فرد به خاطر پول بخواهد پاسخ بدهد.
- در ازای جمع آوری داده هدیه بدهید، به همه که نمی شه پول داد. بعضا یه خودکار ارزش میلیون تومان پول را دارد.
- خدمات رایگان حوزه خودتون را بدهید.
- وبینار برگزار کنید.
- بسته آموزش خاصی را ارائه بدهید.
- در یک کلمه یه چیزی بدهید و پاسخ خوب تحویل بگیرید.
- وقت دیگران مجانی نیست، اگر چه محبت داشته باشند و پاسخ بدهند.
5. تعداد سوالات پرسشنامه زیاد آفت جان پژوهش هست.
تجربه سال های گذشته ام نشون می ده آدم هایی که انگیزه کافی نداشته باشند حداکثر تا 15 دقیقه خوب پاسخ می دهند بعد از اون ده، بیست، سی، چهلی پاسخ می دهند. در این زمان هم بیشتر از 80 تا سوال را نمی شه جواب داد.
برخی از پرسشنامه های آنلاین حدود 200 تا سوال داره. صبح شروع کنی غروب تموم می شی. بعلاوه سوالات زیاد همیشه پایایی آزمون را خیلی خوب نشون میده. در حالی که کلا اوضاع وارونه نشون داده میشه.
راهکار: پرسشنامه های خیلی کوتاه را استفاده کنید. مثلا آزمون شخصیت نئو فرم بلند 250 سوالی را نمی خواهد اجرا کنی، فرم 60 سوالی را اجرا کن. اگر پرسشنامه فرم کوتاه نیست لطفا استفاده نکن.
این پرسشنامه های فرم بلند برای کار کلینیکی ساخته شده که وقتی مراجع میاد تمایل داره درمان بشه و بنابراین وقت می گذاره و خوب پاسخ میده.
4. ساعات خاصی در روز و هفته هست که افراد بهتر پاسخ می دهند!
معمولا در طول روز طبق الگوهای سبک زندگی وجود داره که افراد بهتر پاسخ می دهند. سعی کنید در این ساعات از روز داده ها را جمع آوری کنید. نتایج مطالعاتی را می خوندم که عصرها، آخر هفته ها (نه روز تعطیل) افراد آمادگی ذهنی بیشتری دارند و با دقت بالایی به پرسشنامه ها پاسخ می دهند.
3. افراد مسن و برخی از افراد که گروه هدف شما هستند، اغلب ممکن است در شبکه های اجتماعی نباشند!
میانگین سنی در ایران در حال افزایش هست، بدون شک مطالعاتی که در آتی انجام خواهد شد بر روی گروه سالمندان نیز خواهد بود. الزاما همیشه جمع آوری داده از طریق آنلاین جامعه هدف شما را پوشش نمی دهد.
بهتر است از جمع آوری اطلاعات از کسانی که نسبت به تکنولوژی دانش کافی را ندارند، داده آنلاین جمع آوری نکنید.
2. وقتی پرسشنامه ای را در یک سازمان اجرا می کنید، به نکات زیر توجه کنید!
افرادی که در سازمانی مشغول به کار هستند از ترس اخراج و تعدیل شدن بعضا سعی تلاش خود را در جهت عالی نشان دادن و مطلوبیت می کنند. اجازه بدهید که اگر کسی نمی خواهد حتی با این که در سازمان هست، به پرسشنامه شما پاسخ ندهد.
1. جمع آوری داده آنلاین برای ساخت پرسشنامه
برای این که یک پرسشنامه بسازیم، بعضا نیاز هست که برای نشان دادن دقت پرسشنامه (پایایی) از روش بازآزمایی استفاده کنیم. یعنی از افراد دو مرتبه آزمون را بگیریم ولی با فاصله زمانی حداقل 4 تا 6 هفته.
سعی کنید نمونه ای که قرار هست مجددا بر روی آن اجرا کنید باز هم معرف کل جامعه باشد. مثلا اگر نمونه اولیه شما 1000 نفر هست. برای بازآزمایی اگر 100 نفر مجددا به آزمون پاسخ می دهند. باز هم معرف جامعه 1000 نفری شما باشند.
1 دیدگاه
به گفتگوی ما بپیوندید و دیدگاه خود را با ما در میان بگذارید.
به امید اینکه روزی برسد نکات آموزشی کابردی شما قبل از ارائه واحد پایان نامه به دانشجو آموزش داده شود.
سربلند و پیروز باشید
عالی بود.