چیزی که از این درس میبری
- عبارت «۵۰ درصد کمتر»، در حقیقت کاهش از ۲ به ۱ مورد در هر ۱۰۰۰ نفر طی ده سال (افت ناچیز ۰٫۱ واحد درصد) بود.
- یک مطالعهٔ مشاهدهای روی ۳۰۰ نفر از یک درمانگاه صرفاً میتواند همبستگی را نشان دهد نه علیت را، و برای عارضهای نادر بیش از حد کوچک است.
- مقدار p = ۰٫۰۴ در میان ۲۰ خوراکی مورد آزمون، تقریباً معادل همان چیزی است که بر اثر شانس و تصادف رخ میدهد.
فهرست این درس۶
۰۱پرسش ۱ · درس ۸
ریسک نسبی یا ریسک مطلق؟
عبارت «۵۰ درصد کمتر» نمایانگر یک تغییر نسبی است. اعداد واقعی مقاله نشان میدهند که در طول ده سال، بیماری Z در حدود ۲ نفر از هر ۱۰۰۰ نفر غیرقهوهخور و ۱ نفر از هر ۱۰۰۰ نفر مصرفکنندهٔ قهوه بروز کرده است. این تفاوت یک کاهش ۵۰ درصدی نسبی است، اما در واقعیت تنها نشاندهندهٔ ۱ مورد کمتر بهازای هر ۱۰۰۰ نفر (معادل ۰٫۱ واحد درصد) است. به بیان دیگر، باید حدود ۱۰۰۰ نفر بهمدت ده سال مداوم قهوه بنوشند تا از بروز ۱ مورد بیماری پیشگیری شود؛ آن هم با این فرض قطعی که قهوه واقعاً علت این تفاوت باشد.
دادههای کاملاً یکسان، دو شیوهٔ گزارش: «۵۰ درصد کاهش ریسک» در برابر «۱ مورد کمتر بهازای هر ۱۰۰۰ نفر در طول ده سال».
خودت رو امتحان کنسؤال ۱ از ۵
ریسک بیماری Z از ۲ در ۱۰۰۰ به ۱ در ۱۰۰۰ کاهش مییابد. تغییر مطلق کدام است؟
- ۵۰ درصد
- ۱ در ۱۰۰۰، یا ۰٫۱ واحد درصد
- ۱ واحد درصد
- نسبت ۲ به ۱، یعنی نصف شدن
جواب رو ببین
۱ در ۱۰۰۰، یا ۰٫۱ واحد درصد
کاملاً درست است. تغییر مطلق تفاضل مستقیم دو ریسک است: ۲ − ۱ = ۱ مورد بهازای هر ۱۰۰۰ نفر، که معادل ۰٫۱ واحد درصد است. «۵۰ درصد» و «نصف شدن» توصیفکنندهٔ تغییر نسبی هستند.
قدمبهقدم ببین

۱/۴کارت تیتر یک کارت تیتر با نماد کوچک Z در گوشه و عدد بزرگ نارنجیرنگ ۵۰٪- در مرکز: مصرفکنندگان قهوه ۵۰ درصد کمتر به بیماری Z مبتلا میشوند. هنوز هیچ سنجش یا اعتبارسنجی انجام نشده است. بیایید بررسی را آغاز کنیم.

۲/۴بررسی ۱: نسبی یا مطلق؟ نخستین ردیف بررسی در کنار کارت ظاهر میشود، با یک دایرهٔ خالی و نماد ۲ ← ۱ در ۱۰۰۰. زیر عدد ۵۰٪- روی کارت، عبارت کوچک «۰٫۱- واحد درصد» افزوده میشود. ریسک از ۲ به ۱ در هر ۱۰۰۰ نفر رسیده است: کاهشی واقعی، اما بسیار ناچیز.

۳/۴بررسی ۲ و ۳: چه نوع پژوهشی و چند شرکتکننده؟ دو ردیف دیگر پدیدار میشوند. برچسب مشاهدهای (obs) همراه با پیکان خطچین نشاندهندهٔ مطالعهٔ مشاهدهای است: یک همبستگی صرف، نه اثبات علیت. برچسب ۳۰۰ = n با خوشهای کوچک از نقطهها، تعداد افراد را نشان میدهد. وقتی نرخ بیماری ۱ یا ۲ در هر ۱۰۰۰ نفر باشد، گروهی ۳۰۰ نفره بسیار کوچکتر از آن است که بتواند تفاوتی تا این حد نادر را بسنجد.

۴/۴بررسی ۴، و کوچک شدن اثر ادعایی ردیف چهارم مقدار p = ۰٫۰۴ و نسبت ۱ از ۲۰ را نشان میدهد: یک نتیجهٔ بهظاهر «معنادار» در میان ۲۰ خوراکی مورد آزمایش، یعنی تقریباً همان چیزی که از شانس و تصادف انتظار میرود. هر چهار ردیف تیک بنفش میگیرند و عدد ۵۰٪- روی کارت از نارنجی پررنگ به خاکستری کدر میگراید. پس از این چهار پرسش، آن عدد تکاندهنده بسیار کوچکتر و بسیار نامطمئنتر به نظر میرسد.
خودت رو امتحان کنسؤال ۲ از ۵
این مطالعه صرفاً افرادی را مشاهده کرده که خودشان عادت به نوشیدن قهوه داشتهاند. کدام فعل در تیتر صادقانه و دقیق است؟
- «قهوه خطر ابتلا به Z را کاهش میدهد»
- «قهوه با کاهش ریسک ابتلا به Z همبستگی دارد»
- «قهوه از ابتلا به Z پیشگیری میکند»
- «قهوه بیماری Z را درمان میکند»
جواب رو ببین
«قهوه با کاهش ریسک ابتلا به Z همبستگی دارد»
کاملاً درست است. افراد عادات نوشیدن قهوه را خودشان انتخاب کردهاند و مصرفکنندگان قهوه ممکن است از نظر درآمد، سبک زندگی یا مصرف دخانیات تفاوتهای متعددی داشته باشند. مطالعهٔ مشاهدهای صرفاً یک ارتباط یا همبستگی را نشان میدهد؛ افعالی چون «کاهش میدهد» یا «پیشگیری میکند» ادعای علیت دارند که این مطالعه قادر به اثبات آن نیست.
۰۲پرسشهای ۳ و ۴ · درسهای ۴، ۵ و ۱۰
چه کسانی، چه تعداد، و با چه درجهای از قطعیت؟
این مطالعه وضعیت ۳۰۰ بیمار از یک درمانگاه منفرد را پیگیری کرده است. این یک نمونهٔ بسیار محدود است و بههیچوجه نمونهای تصادفی از جامعه نیست، بلکه فقط مراجعان همان درمانگاه را در بر میگیرد. افزون بر این، برای عارضهای تا این حد نادر، چنین حجم نمونهای شدیداً ناکافی است: با شیوع ۱ تا ۲ مورد در ۱۰۰۰ نفر، انتظار میرود در میان ۳۰۰ نفر حتی کمتر از یک مورد کامل رخ دهد؛ پس باید پرسید کل مقایسه بر چند بیمار انگشتشمار تکیه دارد! بازهٔ اطمینان مقاله نیز، «بین ۱۰ تا ۸۰ درصد کاهش»، بسیار فراخ و مبهم است که نشاندهندهٔ ناپایداری شدید برآورد است. از سوی دیگر، مقدار p = ۰٫۰۴ صرفاً یک یافته از میان ۲۰ مادهٔ غذایی مورد آزمون بوده است؛ دقیقاً همان چیزی که تصادف محض تولید میکند.
وقتی اعداد گزارششده در تیتر با حجم نمونه همخوانی ریاضی ندارند، همین یک نکته بهتنهایی نشان میدهد باید تا انتشار پژوهشهای بزرگتر تأمل کرد.
دو بررسی تکمیلی: نوع میانگین و شیوهٔ ترسیم نمودار
کدام میانگین؟ (درسهای ۱ تا ۳)
در بدنهٔ خبر آمده است: «بهطور میانگین، مصرفکنندگان روزانه ۴ فنجان قهوه مینوشند».
تعداد اندکی از افراد با مصرف بسیار بالا میتوانند میانگین حسابی را تا ۴ فنجان بالا بکشند، در حالی که میانه (میزان مصرف یک فرد نوعی و عادی) تنها ۲ فنجان است.
نمودار چگونه ترسیم شده است؟ (درس ۹)
نمودار ستونی مقاله برای مقایسهٔ دو ریسک، محور عمودی خود را بهجای صفر از ۰٫۸ در ۱۰۰۰ آغاز کرده است.
در نتیجه، ستونهای ۱ و ۲ ارتفاعی معادل ۰٫۲ و ۱٫۲ واحد پیدا کردهاند: یکی از ریسکها شش برابر دیگری جلوه میکند، در حالی که اختلاف واقعی صرفاً دو برابر است.
خودت رو امتحان کنسؤال ۳ از ۵
هر پرسش ارزیابی را به یافتهای که در کالبدشکافی تیتر قهوه آشکار کرد متصل کنید
- ریسک نسبی یا مطلق؟
- چه نوع مطالعهای؟
- چه کسانی و چه تعداد؟
- آیا معنادار و اثرگذار است؟
- نمودار چگونه ترسیم شده است؟
جواب رو ببین
- ریسک نسبی یا مطلق؟ → «۵۰ درصد کمتر» در عمل یعنی ۱ مورد کمتر بهازای هر ۱۰۰۰ نفر
- چه نوع مطالعهای؟ → مشاهدهای: نشاندهندهٔ پیوند، نه اثبات علیت
- چه کسانی و چه تعداد؟ → ۳۰۰ فرد از یک درمانگاه منفرد
- آیا معنادار و اثرگذار است؟ → p = ۰٫۰۴، صرفاً یک یافته در میان ۲۰ مادهٔ غذایی
- نمودار چگونه ترسیم شده است؟ → شروع محور ستونی از مقدار ۰٫۸ بهازای هر ۱۰۰۰ نفر
۰۴پرسش ۷ · درسهای ۷ و ۱۱
نرخ پایه و چشمانداز کلان شواهد
بیماری Z اساساً عارضهای نادر است (حدود ۲ مورد در ۱۰۰۰ نفر طی ده سال)؛ بنابراین حتی اگر نصف شدن واقعی هم رخ دهد، ریسک فردی تغییری بسیار ناچیز میکند. از طرف دیگر، یک مطالعهٔ منفرد هرگز پیکرهٔ شواهد علمی به شمار نمیآید. پرسش پایانی این است که سایر پژوهشها چه یافتهاند: آیا مرورهای سیستماتیک یا کارآزماییهای بالینی گسترده ارتباط میان قهوه و بیماری Z را بررسی کردهاند؟ هرگاه یک مطالعهٔ مشاهدهای کوچک با مجموعهٔ بزرگی از پژوهشهای معتبر ناهمخوان باشد، معمولاً وزن علمی بر دوش پژوهشهای گستردهتر است.
«نرخ پایه چقدر است؟» و «سایر پژوهشها چه میگویند؟» دو پرسش حیاتی هستند که بیشتر تیترهای رسانهای هرگز پاسخی برای آنها ارائه نمیدهند.
۰۵قدمبهقدم
چکلیست ۷ مرحلهای برای ارزیابی تیترهای خبری
- نسبی یا مطلق؟
ریسک آغازین را بیابید: «دقیقاً از میان چند نفر؟»
- چه نوع مطالعهای؟
کارآزمایی تصادفی یا مطالعهٔ مشاهدهای؟ روی مدل حیوانی یا انسان؟ «همبستگی دارد» یا «باعث میشود»؟
- چه کسانی و چه تعداد؟
یک نمونهٔ تصادفی یا صرفاً مراجعان یک درمانگاه؟ دهها، صدها، یا دهها هزار نفر؟
- چه میزان عدم قطعیت؟
عرض بازهٔ اطمینان یا حاشیهٔ خطا چقدر است؟ آیا یک p-value خوششانس از میان دهها آزمون بوده است؟
- کدام میانگین و با چه میزان پراکندگی؟
میانگین حسابی یا میانه؟ آیا چند مقدار فرین و پرت میانگین را به یک سو کشیدهاند؟
- نمودار چگونه ترسیم شده است؟
محور نمودار از کجا آغاز میشود؟ آیا تعداد خام نمایش داده شده یا نرخ؟ بازهٔ زمانی کدام است؟
- نرخ پایه چقدر است و سایر پژوهشها چه میگویند؟
آیا پدیده اساساً نادر بوده است؟ آیا یک مطالعهٔ منفرد است یا با پیکرهٔ شواهد علمی همخوانی دارد؟
خودت رو امتحان کنسؤال ۴ از ۵
کدام بازنویسی از تیتر خبر، بیشترین انطباق و دقت علمی را دارد؟
- «قهوه خطر ابتلا به بیماری Z را به نصف میرساند»
- «دانشمندان ثابت کردند قهوه از بدن در برابر بیماری Z محافظت میکند»
- «در یک مطالعهٔ مشاهدهای محدود، موارد ابتلا به Z در میان مصرفکنندگان قهوه اندکی کمتر بود (۱ در برابر ۲ مورد بهازای هر ۱۰۰۰ نفر)»
- «قهوه هیچ اثری بر بیماری Z ندارد»
جواب رو ببین
«در یک مطالعهٔ مشاهدهای محدود، موارد ابتلا به Z در میان مصرفکنندگان قهوه اندکی کمتر بود (۱ در برابر ۲ مورد بهازای هر ۱۰۰۰ نفر)»
کاملاً درست است. این نگارش نوع مطالعه (مشاهدهای)، اندازهٔ آن (محدود) و اعداد مطلق را بیان کرده و ادعای علیت نمیکند. شاید جذابیت ژورنالیستی کمتری داشته باشد، اما دقیقاً در محدودهٔ ادعایی است که شواهد از آن پشتیبانی میکنند.
خودت رو امتحان کنسؤال ۵ از ۵
اگر یک تیتر خبری در چند مرحله از این چکلیست مردود شود، میتوان با قطعیت نتیجه گرفت که قهوه هیچ اثری بر بیماری Z ندارد.
- درست
- نادرست
جواب رو ببین
نادرست
نادرست است. این ارزیابی صرفاً نشان میدهد که پژوهش کنونی توان پشتیبانی از ادعایی مستحکم را ندارد. این موضوع با اثبات عدم وجود هرگونه اثر تفاوت بنیادین دارد. نتیجهگیری خردمندانه این است که «هنوز پاسخ قطعی را نمیدانیم» و گام بعدی، بررسی پژوهشهای بزرگتر و مستحکمتر خواهد بود.
۰۶جمعبندی
مرور پایانی دوره
- عبارت «۵۰ درصد کمتر»، در حقیقت کاهش از ۲ به ۱ مورد در هر ۱۰۰۰ نفر طی ده سال (افت ناچیز ۰٫۱ واحد درصد) بود.
- یک مطالعهٔ مشاهدهای روی ۳۰۰ نفر از یک درمانگاه صرفاً میتواند همبستگی را نشان دهد نه علیت را، و برای عارضهای نادر بیش از حد کوچک است.
- مقدار p = ۰٫۰۴ در میان ۲۰ خوراکی مورد آزمون، تقریباً معادل همان چیزی است که بر اثر شانس و تصادف رخ میدهد.
- همواره بپرسید کدام میانگین گزارش شده، نمودار چگونه رسم شده، نرخ پایه چقدر است و سایر پژوهشهای مستقل چه میگویند.
- چکلیست انتقادی ارقام استوار را از ادعاهای سست تفکیک میکند؛ در پایان، همواره بکوشید تیتر صادقانه را خودتان بازنویسی کنید.
به سبک خودت یادش بگیر.
توی اپ از یادآی بخواه این درس رو سادهتر توضیح بده، از زندگی خودت مثال بزنه یا عمیقتر بره. بعد یه مسیر کامل دور هدف خودت بساز.