پرش به محتوا
آکادمی علم‌نتآموزش کاربردی مهارت‌های پژوهش جست‌وجو در علم‌نت
اجرا، تحلیل و تفسیر

تفسیر اندازهٔ اثر و فاصلهٔ اطمینان

اندازه، جهت و دقت یک اختلاف را بخوانید و بررسی کنید داده‌ها دربارهٔ اهمیت عملی آن چه می‌گویند.

آمادهٔ مطالعه

در گزارش یک آزمایش می‌خوانید که تحویل به‌موقع در یک گروه ۷۴٪ و در گروه دیگر ۶۲٪ بوده است. این اختلاف چقدر است و داده‌ها با چه دقتی آن را برآورد می‌کنند؟ در این راهنما، از روی درصدهای دو گروه و فاصلهٔ اطمینان، یک بند برای گزارش و تفسیر نتیجه می‌نویسید.

پیش از شروع

جدول نتیجه، جهت مقایسه و روش محاسبهٔ فاصله را کنار هم بگذارید. در مثال فرضی ما، هر دانشجو در یک نیمسال در یک دانشکده، یک تکلیف مرجع از درس‌های آنلاین دارد که پیش از قرعه مشخص شده است. دانشجویان به‌صورت فردی و تصادفی با نسبت ۱ به ۱ به دو گروه تخصیص می‌یابند. برای یک گروه، علاوه بر روال معمول، ارسال یک یادآور اضافه ۲۴ ساعت پیش از موعد در نظر گرفته می‌شود. گروه دیگر همان روال معمول را دارد. پیامد، ثبت معتبرِ تحویل نهایی همان تکلیف در بازهٔ تحویل، با احتساب خودِ لحظهٔ موعد است. برنامهٔ تحلیل این مثال.

برای به‌دست‌آوردن اندازهٔ اثر و کران‌های فاصله از شمارش‌های جدول، مراحل محاسبه را دنبال کنید. درس اجرای تحلیل توصیفی و مقایسه‌ای.

گروه تخصیص تعداد تخصیص‌یافته تحویل به‌موقع تحویل به‌موقع انجام نشده وضعیت نامشخص درصد تحویل به‌موقع
روال معمول به‌علاوهٔ یادآور ۱۰۰ ۷۴ ۲۶ ۰ ۷۴٪
فقط روال معمول ۱۰۰ ۶۲ ۳۸ ۰ ۶۲٪

۱. اندازهٔ اثر را با واحد و جهت بخوانید

در این مثال، اندازهٔ اثر اختلاف درصد تحویل به‌موقع بین دو گروه تخصیص است. درصد گروه یادآور را منهای درصد گروه روال معمول می‌کنیم. برآورد نقطه‌ای، مثبت ۱۲٫۰ واحد درصد است. علامت مثبت می‌گوید درصد مشاهده‌شده در گروه یادآور بالاتر بوده است. در این دو گروهِ صدنفره، ۱۲ تحویل به‌موقع بیشتر در گروه یادآور ثبت شد.

«واحد درصد» فاصلهٔ مستقیم بین دو درصد است. تغییر نسبی با تقسیم اختلاف بر مقدار گروه روال معمول به دست می‌آید. در این مثال، ۱۲ تقسیم بر ۶۲ حدود ۱۹٫۴٪ افزایش نسبی است. در گزارش این مثال، عبارت «۱۲ واحد درصد» همان کمیتی را بیان می‌کند که در برنامهٔ تحلیل انتخاب شده است. برنامهٔ تحلیل، گام ۲.

۲. فاصله را در همان مقیاس تفسیر کنید

فاصلهٔ اطمینان ۹۵٪ اختلاف از منفی ۰٫۹ تا مثبت ۲۴٫۴ واحد درصد است. این فاصله با روش ۱۰ نیوکامب برای دو نسبت مستقل به دست آمده است. در این مثال فرض کرده‌ایم که پیامد دانشجویان وابستگی مهمی به یکدیگر ندارد. نیوکامب، روش ۱۰.

فرض کنید همین طرح را بارها در شرایطی تکرار می‌کنیم که فرض‌های روش برقرار باشند و هر بار فاصله را به همان روش می‌سازیم. حدهای فاصله با تغییر داده‌ها جابه‌جا می‌شوند. برای روشی مانند روش این مثال، انتظار داریم حدود ۹۵٪ از فاصله‌های حاصل، همان اختلاف واقعیِ مورد برآورد را دربر بگیرند. این عدد پوشش بلندمدت روش را توصیف می‌کند. احتمالِ قرار گرفتن اختلاف واقعی داخل همین دو حد از این عدد به دست نمی‌آید. گرینلند و همکاران، تعریف پوشش و بند ۱۹.

بازه اندکی پایین‌تر از صفر شروع می‌شود و تا افزایش ۲۴٫۴ واحد درصد می‌رسد. با فرض‌های این تحلیل، داده‌ها هم با کاهش اندک و هم با افزایش تحویل به‌موقع سازگارند. برابری درصدها هم یکی از حالت‌های سازگار است. برای مقایسهٔ میزان پشتیبانی داده‌ها از دو مقدارِ درون بازه، مثل صفر و مثبت ۱۲، به اطلاعاتی بیش از دو حدِ فاصله نیاز داریم. گرینلند و همکاران، بندهای ۲۰ و ۲۳ و بحث پس از آن‌ها.

۳. فاصله را کنار معیار تصمیم بگذارید

صفر به شما می‌گوید در کدام مقدار، اختلافی در درصد تحویل وجود ندارد. برای تصمیم دربارهٔ استفاده از یادآور، پرسش دیگری هم دارید. با توجه به زمانی که صرف تنظیم و پشتیبانی یادآور می‌شود، چه اندازه افزایش برای دانشکده ارزش دارد؟ گرینلند و همکاران، بند ۸ و توصیه‌های تفسیر برآورد.

برای تمرین فرض کنید مسئول درس، افزایش دست‌کم ۱۰ واحد درصد را برای صرف این زمان ارزشمند می‌داند. این عدد یک فرض آموزشیِ جدا از برنامهٔ تحلیل است. برآورد ۱۲٫۰ واحد درصد بالای این حد است. فاصلهٔ اطمینان هم افزایش‌های کمتر از ۱۰ واحد درصد را دربر می‌گیرد و هم افزایش‌هایی در حد ۱۰ واحد درصد یا بیشتر. پس هنوز روشن نیست که افزایش به اندازه‌ای برسد که مسئول درس برای این تصمیم ارزشمند می‌داند.

نتیجه را چطور بررسی کنیم؟

این جمله را برای گزارش بازنویسی کنید. «یادآور تحویل به‌موقع را ۱۲٪ افزایش داد و با احتمال ۹۵٪ اثر واقعی مثبت است.» سه چیز را در بازنویسی پیدا کنید.

  1. درصدهای کدام دو گروه مقایسه شده‌اند و واحدِ برآورد چیست؟
  2. فاصلهٔ اطمینان برای چه کمیتی است و دربارهٔ جهت اختلاف چه می‌گوید؟
  3. اگر همان معیار فرضی ۱۰ واحد درصد را به کار ببریم، آیا بازه میان افزایش کمتر از معیار و افزایش در حد معیار یا بیشتر تمایز می‌گذارد؟

یک پاسخ نمونه. «در این آزمایش فرضی، ۷۴٪ از گروه تخصیص‌یافته به یادآور اضافه و ۶۲٪ از گروه روال معمول، تکلیف مرجع را به‌موقع تحویل دادند. اختلاف برآوردشده مثبت ۱۲٫۰ واحد درصد بود. فاصلهٔ اطمینان ۹۵٪ اختلاف، از منفی ۰٫۹ تا مثبت ۲۴٫۴ واحد درصد بود. با فرض‌های تحلیل، جهت اختلاف و رسیدن افزایش به معیار فرضیِ ۱۰ واحد درصد هر دو نامطمئن‌اند.»

برای تصمیم دربارهٔ اینکه این اختلاف را به چه چیزی می‌توان نسبت داد و دربارهٔ چه کسانی می‌توان گزارش کرد، به درس بعد بروید. تعیین حدود ادعای علّی و تعمیم.

منابع

جایگاه این مطلب در نقشهٔ پژوهش

مهارت‌ها

قالب محتوا و نوع خروجی

این مطلب در کدام روش‌های پژوهش به کار می‌آید؟

  • پژوهش کمی

    وقتی تحلیل، اندازهٔ اثر و فاصلهٔ اطمینان را گزارش می‌کند.

پیمایش به بالا