نظرسنجیها را در خبرها چطور بخوانیم؟
نوشتهٔ Omid Jamshidi · انتشار · ۵ دقیقه مطالعه
حجم نمونه و حاشیهٔ خطای یک نظرسنجی واقعاً چه معنایی دارد، چرا دو درصد اختلاف اغلب اصلاً برتری نیست و پیش از باورکردن تیتر یک نظرسنجی کدام هفت پرسش را باید پرسید.
«نامزد الف پیش افتاد»، «محبوبیت حزب ب سقوط کرد»؛ تیترهایی از این دست اغلب فقط بر پایهٔ یک نظرسنجی نوشته میشوند. نظرسنجی ابزار مفیدی است، چون از معدود راههای فهمیدن نظر میلیونها نفر است. اما نظرسنجی تخمین است، نه شمارش، و بسیاری از تیترها آن را دقیقتر از آنچه هست نشان میدهند. این راهنما پایههایی را توضیح میدهد که برای خواندن درست نظرسنجیها، چه در رسانههای فارسی و چه در خبرهای آمریکا، آلمان یا اسپانیا، لازم است.
نظرسنجی چگونه انجام میشود
مؤسسهٔ نظرسنجی از گروهی از مردم، که «نمونه» نامیده میشود و اغلب حدود ۱۰۰۰ نفر است، پرسشهایی یکسان میپرسد و از پاسخها نظر کل جمعیت را تخمین میزند. این روش فقط وقتی جواب میدهد که نمونه شبیه کل جمعیت باشد. پرسشها تلفنی، از راه پنلهای اینترنتی یا گاهی حضوری پرسیده میشوند. سپس پاسخها وزندهی میشوند: اگر مثلاً جوانان یا مردم یک منطقه در نمونه کمتر از سهم واقعیشان باشند، پاسخ آنها کمی بیشتر به حساب میآید تا نتیجه از نظر سن، جنسیت، منطقه، تحصیلات و گاهی رأی قبلی با جمعیت هماهنگ شود.
به همین دلیل دو نظرسنجی در یک روز میتوانند نتیجهٔ متفاوتی بدهند: روش، وزندهی و پرسشهایشان فرق دارد و هر کدام از این انتخابها بر نتیجه اثر میگذارد.
حاشیهٔ خطا
چون فقط از یک نمونه پرسیده میشود، هر نتیجه حاشیهٔ خطا دارد. برای نمونهٔ ۱۰۰۰ نفری و رقمی در حدود ۵۰ درصد، حاشیهٔ خطا حدود ۳ واحد درصد به بالا یا پایین است (با سطح اطمینان معمول ۹۵ درصد). بهطور تقریبی:
- ۵۰۰ نفر: حدود ۴٫۴ واحد
- ۱۰۰۰ نفر: حدود ۳٫۱ واحد
- ۲۰۰۰ نفر: حدود ۲٫۲ واحد
پس اگر نظرسنجیای با ۱۰۰۰ نفر به نامزدی ۴۸ درصد بدهد، رقم واقعی به احتمال زیاد جایی میان حدود ۴۵ و ۵۱ درصد است. نمونهٔ بزرگتر کمک میکند، اما آهسته: چهار برابر کردن تعداد پاسخدهندگان، حاشیهٔ خطا را فقط نصف میکند.
سه نکته در گزارشهای خبری اغلب نادیده میماند:
- فاصلهٔ دو نامزد از رقم هر کدام نامطمئنتر است. اگر الف ۴۶ و ب ۴۴ درصد داشته باشد و ۱۰۰۰ نفر پرسیده شده باشند، حاشیهٔ خطای این فاصله نزدیک به ۶ واحد است. دو درصد اختلاف از نظر آماری برتری روشنی نیست.
- زیرگروهها بسیار نادقیقترند. اگر تیتری بگوید «جوانان روی برگرداندند» اما فقط از ۲۰۰ جوان پرسیده شده باشد، حاشیهٔ خطا حدود ۷ واحد است.
- حاشیهٔ خطا فقط شانس را پوشش میدهد. دربارهٔ مشکلات دیگر چیزی نمیگوید: کسانی که پاسخ نمیدهند، پنلهای اینترنتیای که نمایندهٔ جامعه نیستند، پرسشهای جهتدار یا رأیدهندگانی که نظرشان را عوض میکنند. پس دقت واقعی نظرسنجیها از آنچه حاشیهٔ خطا نشان میدهد کمتر است.
روند مهمتر از یک نظرسنجی است
هر نظرسنجی عکسی از یک لحظه با مقداری «نویز» است. یک یا دو درصد تغییر نسبت به ماه قبل معمولاً درون حاشیهٔ خطاست و ممکن است کاملاً تصادفی باشد. نشانههای مطمئنتر اینهاست:
- چند نظرسنجی از مؤسسههای مختلف که در یک جهت نشان میدهند؛
- روندی در چند هفته، نه جهشی در یک نظرسنجی؛
- میانگین نظرسنجیها که بسیاری از رسانهها پیش از انتخابات منتشر میکنند و نوسان تکتک نظرسنجیها را صاف میکند.
نظرسنجیای که با همهٔ نظرسنجیهای دیگر فاصلهٔ زیادی دارد، به احتمال زیاد یک «دادهٔ پرت» است تا نشانهٔ یک تحول بزرگ؛ هرچند اغلب همین نظرسنجی بزرگترین تیتر را میگیرد.
نظرسنجی در کشورهای مختلف
- آمریکا: نظرسنجیهای سراسری مجموع آرای مردم را میسنجند، اما رئیسجمهور را «کالج الکترال» انتخاب میکند. برای همین نظرسنجیهای چند ایالت رقابتی اغلب گویاتر از رقم سراسری است.
- آلمان: «Sonntagsfrage» هر هفته میپرسد اگر یکشنبهٔ آینده انتخابات پارلمان فدرال بود، به کدام حزب رأی میدادید. چون احزاب معمولاً برای ورود به پارلمان به ۵ درصد آرا نیاز دارند، حزبهای کوچک نزدیک این مرز توجه زیادی میگیرند؛ اما با ۱۰۰۰ پاسخدهنده، حزبی با ۵ درصد در واقع میتواند جایی میان ۳٫۶ و ۶٫۴ درصد باشد.
- اسپانیا: در کنار مؤسسههای خصوصی، مرکز دولتی پژوهشهای جامعهشناختی (CIS) بهطور منظم نظرسنجی منتشر میکند و قانون انتخابات انتشار نظرسنجیهای انتخاباتی را در پنج روز پیش از رأیگیری ممنوع کرده است.
در کشورهایی که آزادی بیان محدود است، مشکل دیگری هم وجود دارد: پاسخدهندگان ممکن است نظر واقعیشان را نگویند، بهویژه پشت تلفن. دربارهٔ ایران، هم نظرسنجیهایی از مراکز وابسته به نهادهای رسمی منتشر میشود و هم نظرسنجیهای اینترنتی که از خارج کشور انجام میشوند. هر دو با محدودیتهای روششناختی جدی روبهرو هستند، از دسترسی به نمونهٔ واقعی جامعه تا احتیاط پاسخدهندگان. نتیجهٔ هیچکدام را نباید بیتوجه به روش و حاشیهٔ خطایش خواند.
هفت پرسش برای هر نظرسنجی
- چه کسی آن را انجام داده و چه کسی هزینهاش را داده است؟ نظرسنجی سفارشی یک حزب یا ستاد انتخاباتی لزوماً غلط نیست، اما دقت بیشتری میطلبد.
- کی انجام شده است؟ رویدادهای پس از آن ممکن است نظرها را تغییر داده باشند.
- از چند نفر و چگونه پرسیده شده است؟ تلفنی، اینترنتی یا حضوری؟
- پرسش دقیقاً چه بوده است؟ شیوهٔ طرح پرسش میتواند پاسخها را بسیار تغییر دهد.
- حاشیهٔ خطا چقدر است و آیا تغییری که گزارش شده از آن بزرگتر است؟
- نظرسنجیهای دیگر چه میگویند؟ با مؤسسههای دیگر و میانگینها مقایسه کنید.
- با «مردد»ها چه شده است؟ بسته به اینکه کنار گذاشته شوند یا نه، یک «برتری» میتواند بسیار متفاوت به نظر برسد.
مؤسسههای معتبر این اطلاعات را منتشر میکنند و رسانههای جدی دستکم زمان، تعداد پاسخدهندگان و نام مؤسسه را ذکر میکنند.
نظرسنجیها در Omid57.info
Omid57.info تیترهای رسانههای زیادی را نشان میدهد، برای همین اغلب چند گزارش دربارهٔ نظرسنجیهای مختلف را کنار هم میبینید؛ گاهی با تیترهای متضاد در یک روز. پرسشهای بالا برای مقایسهٔ آنها کمک میکند. راهنمای چگونه اخبار را هوشمندانه بخوانیم؟ بررسیهای بیشتری برای هر خبر پیشنهاد میکند و راهنمای خبرگزاریها چگونه کار میکنند توضیح میدهد چرا رسانههای زیادی یک نظرسنجی را با جملههایی تقریباً یکسان گزارش میکنند.
جمعبندی
نظرسنجی تخمینی دقیق اما همراه با عدم قطعیت است. به حجم نمونه و حاشیهٔ خطا توجه کنید، برتریها و تغییرهای کوچک را با احتیاط بخوانید، روند و میانگین را بر یک نتیجهٔ تنها ترجیح دهید و همیشه بپرسید چه کسی، از چه کسانی، کی و چگونه پرسیده است. آن وقت تیتر نظرسنجی همان چیزی میشود که باید باشد: یک اطلاع مفید، نه پیشگویی.