איך קוראים סקר דעת קהל: מדגם, טעות דגימה והשאלות שכדאי לשאול
כמה אנשים נשאלו, מי הזמין את הסקר ומה אומרת טעות הדגימה? מדריך קצר לקריאה ביקורתית של סקרים, לפני שמתרגשים ממנדט שזז.
בתקופת בחירות, וגם סתם באמצע שבוע חדשותי סוער, סקרי דעת הקהל ממלאים את המסך: מפלגה אחת מזנקת בשני מנדטים, אחרת מתרסקת מתחת לאחוז החסימה, ורוב הציבור תומך או מתנגד למהלך כלשהו. המספרים נראים מדויקים ומוחלטים, אבל כל מי שעוסק בסטטיסטיקה יודע שסקר הוא הערכה, ולהערכה יש גבולות. היכולת לקרוא סקר בעין ביקורתית היא מיומנות אזרחית בסיסית, והיא אינה דורשת תואר במתמטיקה. מספיק להכיר כמה מושגים ולשאול כמה שאלות פשוטות.
סקר הוא תצלום רגע, לא נבואה
סקר מודד מה אמרו אנשים ביום שבו נשאלו. הוא אינו חוזה איך יתנהגו בעוד חודש, ואפילו לא בעוד שבוע. דעות משתנות, אירועים חדשותיים מטלטלים את סדר היום, ומצביעים רבים מחליטים רק בימים האחרונים. כשסקר שנערך חודשים לפני הבחירות מוצג כתחזית לתוצאות, מדובר בפרשנות ולא במדידה.
לכן מגמה חשובה יותר מסקר בודד. אם כמה סקרים של מכונים שונים מראים לאורך שבועות תזוזה באותו כיוון, סביר שמשהו אמיתי קורה. לעומת זאת, סקר אחד שמראה קפיצה דרמטית, בזמן ששאר הסקרים יציבים, הוא לרוב רעש סטטיסטי או תוצאה של שיטת דגימה שונה. הכותרת תמיד תעדיף את החריג, והקורא הנבון ימתין לסקר הבא.
המדגם: מי נשאל, כמה נשאלו ואיך הגיעו אליהם
אי אפשר לשאול את כל אזרחי המדינה, ולכן שואלים קבוצה קטנה שאמורה לייצג אותם. בסקרים שמתפרסמים בתקשורת מדובר בדרך כלל בכמה מאות משיבים, לעתים באלף. זה נשמע מעט, אבל מדגם קטן יכול לייצג היטב אוכלוסייה גדולה, בתנאי שהוא נבחר נכון. גודל המדגם חשוב פחות מהרכבו.
הרכב נכון פירושו שהמדגם משקף את האוכלוסייה לפי גיל, מגדר, אזור מגורים, מידת דתיות, מגזר ודפוסי הצבעה קודמים. כאן מתחילים הקשיים. סקרים טלפוניים מתקשים להגיע לצעירים שאינם עונים למספרים לא מוכרים. סקרים אינטרנטיים נשענים על פאנלים של נרשמים מראש, שעלולים להיות שונים מהציבור הרחב, ומתקשים להגיע למבוגרים ולקהלים שנוכחותם ברשת נמוכה. מכוני הסקרים מתקנים את העיוותים באמצעות שקלול, כלומר מתן משקל יתר לקבוצות שיוצגו בחסר, אבל שקלול הוא גם מקור לטעויות.
כדאי לשים לב גם לשאלה מי נכלל בתוצאה. חלק מהנשאלים עונים שטרם החליטו, אחרים מסרבים להשיב, ויש מי שלא בטוח שיצביע בכלל. כל מכון מטפל בקבוצות האלה אחרת, וזו אחת הסיבות לכך ששני סקרים שנערכו באותו יום מציגים תמונות שונות.
טעות הדגימה: המספר הקטן שמשנה את התמונה
לכל סקר מדגמי יש טעות דגימה, והיא נגזרת בעיקר מגודל המדגם. במדגם של כחמש מאות משיבים טעות הדגימה המרבית היא בסביבות ארבעה אחוזים וחצי לכל כיוון, ובמדגם של אלף משיבים היא יורדת לכשלושה אחוזים. המשמעות היא שכאשר סקר מוצא ש-52 אחוזים תומכים בעמדה מסוימת, ייתכן בהחלט שהשיעור האמיתי הוא 48 או 56.
בסקרי מנדטים ההשלכות דרמטיות עוד יותר. מנדט אחד שווה פחות מאחוז מהקולות, ולכן הבדל של מנדט או שניים בין סקר לסקר נמצא עמוק בתוך טווח הטעות. מפלגה שמקבלת בסקר ארבעה מנדטים יכולה באותה מידה להיות מתחת לאחוז החסימה או להחזיק בשישה. כותרת על מפלגה שהתחזקה במנדט מתארת, במקרים רבים, שינוי שאי אפשר להבחין בינו לבין מקריות.
וטעות הדגימה היא רק הטעות שאפשר לחשב. היא אינה כוללת טעויות שנובעות ממדגם לא מייצג, מנשאלים שאינם אומרים את האמת או מניסוח בעייתי של השאלה. הטעות האמיתית גדולה כמעט תמיד מזו שמצוינת באותיות הקטנות.
ניסוח השאלה ומי הזמין את הסקר
הדרך שבה שואלים משפיעה על התשובה. שאלה שנפתחת בהצגה חד צדדית של הנושא, שמשתמשת במילים טעונות או שמציעה רק שתי אפשרויות קיצוניות, תניב תוצאה אחרת משאלה מאוזנת. גם סדר השאלות משנה, משום ששאלה מוקדמת יכולה לכוון את הנשאל לקראת זו שאחריה. לכן, כשמצטטים ממצא מפתיע, כדאי לחפש את הנוסח המדויק של השאלה.
חשוב לא פחות לדעת מי הזמין את הסקר. סקר שהזמין כלי תקשורת שונה מסקר שהזמינו מפלגה, ארגון בעל עניין או חברה מסחרית, שמפרסמים בדרך כלל רק תוצאות שנוחות להם. זה אינו אומר שהסקר מזויף, אבל זה בהחלט אומר שלא ראיתם את התמונה כולה. החוק בישראל מחייב את מי שמפרסם סקר בחירות לציין פרטים בסיסיים, ובהם מי הזמין את הסקר, מי ערך אותו, מתי נערך, מה גודל המדגם ומהי טעות הדגימה. כשהפרטים האלה חסרים, יש סיבה לחשדנות.
סקר, מדגם ותוצאות אמת: שלושה דברים שונים
בערב הבחירות מתפרסמים המדגמים של ערוצי הטלוויזיה, ורבים מתבלבלים בינם לבין סקרים רגילים. המדגם אינו שואל אנשים מה בכוונתם לעשות, אלא מבקש ממצביעים שיצאו מקלפיות נבחרות לחזור על הצבעתם בקלפי מדמה. בדרך כלל הוא מדויק יותר מסקר, משום שהוא נשען על אנשים שכבר הצביעו בפועל, אבל גם הוא מדגם לכל דבר, וגם לו יש טעות.
ההיסטוריה של מערכות הבחירות מלמדת שהמדגמים מפספסים מדי פעם, במיוחד כשמדובר ברשימות שמרחפות סביב אחוז החסימה או בהפרש של מנדט בין הגושים. מצביעים שמסרבים להשתתף, הצבעה בשעות המאוחרות וקולות החיילים שנספרים אחר כך, כל אלה יכולים להזיז את התוצאה. לכן נאומי ניצחון שנישאים על סמך מדגם מתבררים לפעמים כמוקדמים מדי.
בימים האחרונים שלפני פתיחת הקלפיות חל בישראל איסור לפרסם סקרים חדשים. המטרה היא לאפשר לבוחרים להחליט בלי השפעה של נתונים שאין עוד זמן לבדוק או להפריך.
חמש שאלות לפני שמשתפים סקר
לפני שמעבירים הלאה כותרת על סקר מרעיש, כדאי לעצור ולבדוק:
- מי ערך את הסקר ומי הזמין ושילם עליו.
- מתי נערך, והאם קרה מאז משהו שיכול לשנות את התמונה.
- כמה אנשים השתתפו, איך נבחרו ומהי טעות הדגימה.
- מה בדיוק נשאל, והאם הניסוח מאוזן.
- האם סקרים אחרים מאותה תקופה מראים תמונה דומה.
סקרים הם כלי חשוב. הם מאפשרים לשמוע את קולו של הציבור גם בין מערכת בחירות אחת לאחרת, ומספקים למקבלי ההחלטות ולתקשורת מידע שאין לו תחליף. אבל הם אינם תוצאות אמת, והם בוודאי אינם גזירת גורל. מי שקורא אותם בזהירות, מסתכל על מגמות ולא על קפיצות ושואל מי עומד מאחוריהם, יוצא מעודכן יותר ונוח פחות להטעיה.