טל גלילי

מי כותב על הכתבים? על הכשל בהסבר מחקרים מדעיים לציבור הרחב

בקומיקס אינטרנטי כלשהו פורסמה בזמנו הקריקטורה הבאה שמתארת את המעגל שעובר מחקר מדעי, מרגע פירסומו ועד שהוא משפיע על הציבור הרחב. בזמנו חשבתי שהקריקטורה הזו מצחיקה. עכשיו אני כבר לא חושב כך:

הסיפור שמתואר בקריקטורה היא בדיוק מה שקרה לאחרונה לגבי הקשר שבין עוצמת התאורה בחדר השינה לבין הסיכוי לסרטן השד אצל נשים.
הכתבה פורסמה בעיתון מדעי. במקביל הייתה הודעה לעיתונות על תוצאות המחקר בבלוג של מערך ההסברה של אוניברסיטת חיפה (עובדים עם וורדפרס, כל הכבוד). וזה הסתיים (אני מקווה) בכתבה שפורסמה בווינט. הבעיה היא שתיאור המאמר, שפורסם בווינט, שגוי. כתבתי על זה כמה מילים בבלוג הסטטיסטיקה שלי (וגם בטוויטר/פייסבוק). אם לסכם במשפט: המאמר בווינט מתחיל במילים "כדאי להחשיך את חדר השינה". משפט שהוא פשוט לא נכון. המחקר שפורסם הוא:

  1. מחקר של בדיקת קשר ולא סיבתיות
  2. מצא שמידת הקשר היא של 1.248
  3. המשמעות של "מידת הקשר" הזו היא של חסם עליון על רמת הסיכון (כלומר, סביר שמידת הקשר האמיתית היא קטנה יותר – דהיינו, שגם אם יש סיבתיות, אז מידת ההשפעה היא נמוכה יותר מ- 1.248)
  4. ומעל כל אלו, כותב המאמר מדווח על מידת קשר של 1.4 – כשבמחקר המקורי שפורסם כתוב במפורש שהתוצאה הזו איננה מובהקת סטטיסטית. (כלומר, תאורה יכולה הייתה באותה המידה גם להגן מסרטן השד…)

כשכתבתי זאת, האנשים שהגיבו אלי השיבו לי "מה, זה מפתיע אותך שכותבים טעויות/שטויות על מחקר מדעי בעיתונות?"
והתשובה היא שכן, זה קצת מפתיע אותי. איכשהו, בתמימותי, חשבתי שתיאור של מחקר בעיתון אולי לא יצליח לתאר את כל המורכבות, אבל יש מרחק בין זה לבין לכתוב על תוצאה מסויימת שהיא קיימת, כשבמאמר המקורי נכתב במפורש שהיא לא קיימת.

ומה המשמעות של זה? המשמעות היא שיש לנו אוכלוסיה שלמה של אנשים שלא מבינים מה המדענים אומרים להם. בין השאר כי הכתבים בעיתונות לא מבינים מה המדענים אומרים להם. מה שאומר שהאוכלוסיה הזו לא תדע לקבל החלטות על בסיס המידע המדעי שנאסף.

אני לא מצליח לחשוב על שום תשובה לבעיה הזו מלבד חינוך. שיהיה חינוך מדעי שילמד מהוא מחקר מדעי כמותי (נו, איך קוראים למקצוע הזה, אה כן – סטטיסטיקה!)

כבר כתבתי על זה בזמנו, בשנת 2009 ולפני כן ב- 2007, בפוסטים:

כנראה שנוסיף את זה לרשימת המטלות שלי לאחרי שאסיים את התואר השני שלי בביוסטטיסטיקה.

אם יש לכם דעות מעניינות להוסיף, התגובות לרשותכם.