מאמר
חוות דעת על מתילן כחול: מה דיווחים אישיים יכולים ולא יכולים ללמד
הקלידו „חוות דעת על מתילן כחול” בתיבת חיפוש, והדיווחים יופיעו לפני הניסויים. אדם אחד כותב ששעות אחר הצהריים שלו חזרו אליו. אחר כותב שלא קרה דבר. שלישי מתאר לילה רע ומפסיק לפרסם. מפתה לספור אותם: אם מספיק אנשים מתארים את אותו שינוי, כנראה יש בזה משהו.
אוסף של דיווחים אישיים אינו ניסוי קליני קטן. זהו סוג אחר של חומר, שנאסף מאנשים שמעולם לא הסכימו להיות מדגם.
מה מכיל דיווח יחיד
חשבו על פוסט מציאותי: „שבועיים עם מתילן כחול, עשר טיפות במים בכל בוקר. הערפל המוחי נעלם, אני שוב מרגיש כמו עצמי.”
בשלושת המשפטים האלה מסתתרות ארבע טענות. נעשה שימוש ב־מוצר, נצרכה כמות, חלף פרק זמן, ומשהו השתנה. אנחנו קוראים את הטענה האחרונה ומתייחסים לשלוש הראשונות כאל קישוט, אף שדווקא הן מגדירות את המגבלות. המוצר הוא מה שהיה בבקבוק. הכמות היא ספירת טיפות, שאינה מדידה. השינוי הוא התרשמות סובייקטיבית, שהוערכה בידי מי שציפה שמשהו יקרה, ללא השוואה וללא תיעוד של מצב הבסיס. זו תצפית אחת, והיא אמיתית, משום שהאדם אכן הרגיש אחרת. היא עדיין אינה הסבר.
ארבעה הסברים אחרים מתאימים לאותו משפט באותה מידה: ציפייה, משהו אחר שהשתנה באותו זמן, התנודות של התסמין עצמו, ושינוי במדידה. אי אפשר לשלול אף אחד מהם על סמך הדיווח לבדו.
למי שלא הרגישו דבר יש פחות סיבה לכתוב
הראיה הברורה ביותר לכך שדיווחים מקוונים הם מדגם מוטה מגיעה מהשוואה שנערכה ב־2014 בין 1,901 חוות דעת ב־Amazon על טיפולים לירידה במשקל ולפוריות לבין תוצאות ניסויים. לאחר שישה חודשים של דיאטת אטקינס, 93% מכותבי חוות הדעת המקוונות (64 מתוך 69) דיווחו שירדו לפחות 10 kg, בעוד ש־27% ממשתתפי הניסוי (19 מתוך 71) השיגו את אותו שינוי. מסקנת המחברים היא המשפט שכדאי לזכור: „חוות דעת מקוונות מפריזות בתועלת של טיפולים רפואיים, כנראה משום שאנשים עם תוצאות שליליות נוטים פחות לספר לאחרים על חוויותיהם.” למי שמצבו השתפר יש סיפור לספר; למי שהשקיע שישה שבועות והרגיש בדיוק אותו דבר אין מה לדווח.
כיוון ההטיה אינו קבוע, ויש בכך לקח. ניתוח מ־2025 של 369 פוסטים ב־Reddit על תוספי פוריות מצא מאזן הפוך: מבין 279 כותבים שדיווחו על נטילת תוספים, 9.3% תיארו השפעה חיובית לפי התרשמותם ו־12.9% השפעה שלילית, בעוד ש־21.1% ביקשו עצה. בפורום שממוקד בפתרון בעיות, זהו הדפוס הצפוי. מחקר נפרד מצא שלמטופלים שהצטרפו לקהילת בריאות מקוונת היו ציוני דיכאון וחרדה גבוהים יותר מאלה של מי שלא היו חברים בה.
תמהיל הדיווחים הוא מאפיין של הקהילה, לא מפקד של התוצאות.
הציפייה היא מרכיב
ההתנגדות הרגילה היא אישית: „אני לא מסוג האנשים שציפייה יכולה להטעות.”
ב־2010, צוות בהובלת חוקרים מהרווארד נתן ל־80 אנשים עם תסמונת המעי הרגיז גלולות פלצבו שתוארו להם בכנות כחסרות פעילות, או לא נתן טיפול כלל, תוך שמירה על קשר בהיקף שווה עם המטפלים בשתי הקבוצות. לאחר שלושה שבועות, ציוני השיפור הכולל היו 5.0 ± 1.5 בקבוצת הפלצבו הגלוי, לעומת 3.9 ± 1.3 בקבוצה שלא טופלה. מטא־אנליזה מאוחרת יותר של אחד־עשר ניסויים שכללו 654 משתתפים מצאה גודל אפקט משוקלל של 0.72 סטיות תקן. מי שנוטל מתילן כחול אפילו אינו במצב של מקבל פלצבו גלוי: הוא מאמין שהחומר פעיל, הוא בחר בו, הוא שילם עליו, והוא גם זה שמתעד את התוצאה.
גם מדדים פיזיולוגיים משתנים. ב־מחקר ברצים במערך פלצבו מאוזן, הביצועים במבחני זמן למרחק 1000 מטר השתפרו רק כשהמשתתפים האמינו שנטלו קפאין, בין שהיה קפאין בכמוסה ובין שלא: גודל אפקט של 0.43 בתנאי ההטעיה, לעומת 0.42 עם החומר האמיתי. כשנאמר להם שקיבלו פלצבו, לא חל שיפור אפילו כשבפועל קיבלו קפאין.
איש אינו יכול להסתיר את הצבע
רוב התוספים מאפשרים לחבר להכין כמוסות זהות. מתילן כחול אינו מאפשר זאת: בנטילה דרך הפה הוא צובע את השתן בכחול או בירוק, ולעיתים גם את הצואה.
ניסוי אקראי מ־2016 ב־Radiology התמודד עם הבעיה בזהירות. המשתתפים קיבלו 280 mg של מתילן כחול בדרגת USP דרך הפה, או צבע מאכל FD&C Blue No. 2 בכמוסות אטומות זהות, והתבקשו להטיל שתן לפני הנטילה, אך לא אחריה עד לסיום הסריקה, כדי להגן על ההסמיה מפני צבע השתן. הניסיון מתועד, וכך גם כישלונו: כל המשתתפים שקיבלו מתילן כחול דיווחו לאחר מכן על שתן כחול, ואף אחד מקבוצת הפלצבו לא דיווח על כך. המחברים כינו את שינוי הצבע „סמן מאוחר המאשר שקיבלו את התרופה”.
דוגמה גדולה יותר מראה את המחיר. ניסוי שלב 3 ב־LMTM מ־2016 הקצה באקראי 891 מטופלים עם מחלת אלצהיימר, ולא כלל כלל קבוצת פלצבו. קבוצת הביקורת קיבלה 4 mg פעמיים ביום, כמות שנבחרה, לדברי המחברים, „כדי לשמור על ההסמיה ביחס לשינוי צבע השתן או הצואה”. היעדרה של פעילות בטבליה היה מתגלה באסלה. מחקר ההצלבה בהפרעה דו־קוטבית, שכלל 37 מטופלים וכינה את קבוצת ה־15 mg שלו „פלצבו”, עשה אותה פשרה מול קבוצת טיפול פעיל של 195 mg.
קראו את מערכי המחקר האלה כאזהרה לגבי ניסויים אישיים. אם מאות מטופלים בניסוי ממומן, עם כמוסות אטומות ורשימת הקצאה אקראית של סטטיסטיקאי, עדיין יכלו לזהות לאיזו קבוצה הוקצו, הרי שמי שמודד טיפות לכוס מים בבית כבר יודע מה הוא נוטל. הסמיה אינה קשה כאן. היא אינה זמינה.
לתסמין יש לוח זמנים משלו
אנשים מתחילים ליטול תוסף רק לעיתים רחוקות במהלך שבוע טוב. הם מתחילים בשבוע רע, וכך נכנסת לתמונה רגרסיה לממוצע: ערכים קיצוניים נוטים לחזור לעבר הממוצע, בין שנעשה משהו בעניינם ובין שלא.
אפשר למדוד את השינוי הזה. בקבוצה שלא טופלה של מטופלים עם כאב כרוני בגב התחתון, ממוצע הכאב בסולם של 0 עד 100 ירד מ־56 בביקור הראשון ל־54 כעבור חודשיים ול־46 כעבור ארבעה חודשים. המחברים מייחסים חלק מהשינוי לתשומת הלב שנובעת מעצם ההשתתפות במחקר, גורם מתערב נוסף שקיים בכל ניסוי עצמי.
שיפור ספונטני שכיח במצבים שאנשים מזכירים בדיונים על מתילן כחול. בקרב 79 מטופלים עם תסמונת עייפות כרונית שנמשכה פחות משנתיים, וללא התערבות שיטתית, 46% דיווחו על שיפור לאחר שנה. בקבוצה של 1,266 אנשים שאושפזו עם COVID-19, כ־65% ממי שדיווחו על ערפל מוחי, אובדן זיכרון או ירידה בריכוז לאחר 8.4 חודשים בממוצע כבר לא דיווחו על כך לאחר 13.2 חודשים, בעוד שאחרים פיתחו את התסמין באותה תקופה. בקרב אנשים עם דיכאון מג'ורי שלא טופלו, שנדגמו במסגרת הרפואה הראשונית, לפי הערכה 23% מגיעים להפוגה בתוך שלושה חודשים ו־53% בתוך שנה.
אין בכך כדי לומר שמתילן כחול אינו עושה דבר. הנתונים האלה מגדירים את מצב הבסיס שחסר בדיווח אישי, ושינוי בסדר הגודל שמתואר בדרך כלל בפוסט בפורום נמצא בטווח השינויים שמתרחשים מעצמם.
לציון יש לוח זמנים משלו
מדידה חוזרת משנה את המדידה. מבוגרים בריאים שהשלימו סוללה רחבה של מבחנים נוירופסיכולוגיים שבע פעמים בשנה השתפרו מעצם החזרה בלבד: השפעות תרגול של 0.36 עד 1.19 סטיות תקן במהלך בדיקות תכופות עד החודש השלישי, ולאחר מכן הביצועים התייצבו. הקפיצה הגדולה ביותר התרחשה בפעם השנייה. ציון שעולה לאורך שלושה שבועות של מבחני אימון מוחי יומיים הוא התוצאה הצפויה של ביצוע המבחן במשך שלושה שבועות ברציפות.
גם סולמות דיווח עצמי אינם חסינים. מילוי חוזר של שאלון הדיכאון של בק במדגם סטודנטים הביא ל־ירידה של 40% בציונים לאורך שמונה שבועות, שניתן לייחס למדידה החוזרת בלבד, והסבירה כ־10% מהשונות. „אני מדרג את מצב הרוח שלי בכל בוקר, והוא עולה” הוא משפט על הדירוג לא פחות משהוא משפט על מצב הרוח.
בדרך כלל משהו אחר השתנה באותו זמן
רוב האנשים שכותבים דיווח על מתילן כחול כבר שינו דברים אחרים: שינה, פעילות גופנית, אלכוהול, תוסף נוסף, חשיפה לאור יום, פרויקט מלחיץ שהסתיים. הדיווח מציין את המוצר משום שהוא הפריט החדש ביותר ברשימה, לא היחיד.
דיווח אינו כולל כמות מאומתת
טיפות הן היחידה המקובלת בחוות דעת על מתילן כחול, והן אינן יחידת מידה. מחקר של 19 בקבוקי טפטפת רב־מנתיים מצא שנפח טיפה בודדת נע בין 33.8 ל־63.4 מיקרוליטר, פער של כמעט פי שניים בין בקבוקים, ושזוויות הטיה קטנות יותר יצרו טיפות קטנות יותר. „עשר טיפות” מבקבוק אחד יכולות להיות כמעט פי שניים מ־„עשר טיפות” מבקבוק אחר, והפוסט בדרך כלל אינו מציין את הריכוז, כך שגם נפח שנמדד היטב אינו ניתן להמרה למסה. המדריך ליחידות מינון מפרט מה נדרש להמרה הזאת.
לכמות יש חשיבות גם באופן שאינו מובן מאליו, משום שהקשר בין מינון לתגובה אינו קו ישר. בניסויים בחולדות, 4 mg/kg שיפרו התרגלות התנהגותית וזיהוי עצמים, 50 עד 100 mg/kg הפחיתו את הפעילות בגלגל ריצה, וריכוזים נמוכים הגבירו את צריכת החמצן במוח בתנאי מעבדה ולאחר מתן בבעל חיים חי — דפוס שהמחברים מתארים כ־תלוי מינון בשני הכיוונים. הסקירה על זיכרון וריכוז מפרידה בין מחקרים בבני אדם לפי המינון מאותה סיבה. לכן חוות דעת חיובית אינה מזהה כמות שתעבוד עבורכם, ודיווח על היעדר תחושה אינו שולל תגובה בכמות אחרת.
יש פער נוסף בין הכמות לחשיפה. במחקר הצלבה בקרב 16 מבוגרים בריאים, הזמינות הביולוגית המוחלטת הממוצעת של מנה מימית שניתנה דרך הפה הייתה 72.3%, עם סטיית תקן של 23.9 נקודות אחוז. שני אנשים שנוטלים אותה כמות מדודה אינם מגיעים בהכרח לאותו ריכוז בדם, כפי שמפרטת הסקירה על ספיגה ופיזור.
דיווח אינו כולל מוצר מאומת
כל חוות דעת היא חוות דעת על בקבוק, והתכולה הנמדדת לעיתים קרובות שונה מהמצוין בתווית. ניתוח של 30 מוצרי מלטונין מצא ש־ביותר מ־71% מהם התכולה סטתה ביותר מ־10% מהתכולה המוצהרת, בטווח שבין 83% פחות ל־478% יותר מהכמות המוצהרת, עם שונות בין אצוות שהגיעה ל־465% וסרוטונין בשמונה מהם. באוסף של 272 תוספי תזונה ותוספים צמחיים שנקשרו לפגיעה בכבד, 51% סומנו באופן שגוי, ושיעור זה הגיע ל־82% בקרב מוצרים סטרואידליים.
למתילן כחול יש מפרט משלו, וחומר שמיוצר לצביעה אינו מחויב לעמוד בו. מוצר התואם את המונוגרפיה בפרמקופיאה נבדק מבחינת זהות, טוהר, מזהמים אורגניים כגון Azure B, שאריות ממסים, מזהמים יסודיים, שארית לאחר הצתה, גבולות מיקרוביאליים ואנדוטוקסינים חיידקיים. המאמר על מזהמים ושיטות בדיקה מציג את הבדיקות האלה ואת מה שתוצאות בדיקה שפורסמו לדגימות מתילן כחול מכסות ואינן מכסות.
זהו החלק בהחלטת הקנייה שהקורא יכול לאמת. מוכרים רבים של מתילן כחול שמפרסמים עמידה ב־USP בודקים רק מתכות כבדות ומתארים זאת כעמידה מלאה בדרישות. Blupreme עובדת עם יצרן פרמצבטי של מתילן כחול ומפרסמת תעודות אנליזה ייעודיות לכל אצווה, המקשרות בין מספר האצווה שעל הבקבוק לבין אצוות חומר הגלם שנבדקה. העמוד על ציון דרגת USP מסביר מה המפרט מכסה, ו־המדריך לקריאת תעודת אנליזה מראה כיצד להתאים דוח לאצווה שקיבלתם.
הידיעה מה היה בבקבוק מסירה גורם מתערב אחד. היא אינה הופכת דיווח של אדם יחיד ללא הסמיה לראיה שהמוצר גרם לשינוי.
אילו דיווחים בכל זאת ראויים לקריאה
תיאורים אישיים הם ראיה חלשה לתועלת, וראיה סבירה למשהו אחר: בעיה אפשרית. אם כמה אנשים מתארים באופן בלתי תלוי אותה תגובה ייחודית, זו השערה לבחינה של איש מקצוע קליני, ו־הסקירה על תופעות לוואי מסבירה כיצד לתאר חשיפה והיכן אפשר לדווח על תגובה חשודה. המדריך למינון יתר ולהרעלה עוסק במקרים הדחופים יותר.
דיווחים גם מראים אילו שאלות כדאי לשאול. שרשור שבו אנשים חלוקים בשאלה אם מתילן כחול עזר לשינה שלהם הוא סימן שכדאי לבדוק את נושא השינה בספרות הניסויים, לא סימן שמתילן כחול עוזר לשינה. סקירת הראיות בבני אדם מציגה את מה שנכלל בספרות הזאת, ו־ספריית המחקר מרכזת את הניסויים.
לקרוא שרשור בלי להטעות את עצמכם
התהליך קצר. העתיקו את הטענה בדיוק. הפרידו בין מה שהאדם הבחין בו לבין מה שהסיק. לאחר מכן רשמו את ההסברים האפשריים ושאלו איזה מהם הדיווח הזה שולל. ברוב המקרים התשובה הכנה היא: אף אחד, ומעמדו של הדיווח הוא לא מוכרע, ולא נכון או שגוי.
הורידו את דף העבודה להערכת דיווח אנקדוטלי כדי לבצע את הבדיקה הזאת על שרשור מסוים. הוא כולל את השדות שבדרך כלל חסרים, מקום לתיעוד ההסברים המתחרים, ותבנית יומן למי שבכל זאת מחליט לנסות משהו.
אם אתם בודקים משהו על עצמכם, ארבע בחירות הופכות את התיעוד לשימושי יותר מהפוסט הממוצע: קבעו את מדד התוצאה ואת סולם הדירוג לפני המנה הראשונה, תעדו מצב בסיס לאורך זמן מספיק כדי לראות כיצד התסמין משתנה בדרך כלל, שנו דבר אחד בכל פעם, ותעדו גם את הימים שהיו גרועים. המדריך לבדיקת פרוטוקול שנמצא ברשת מיישם את אותה הקפדה על הוראות ולא על חוויות.
שתי הקבלות חותמות את הטיעון. הרגשה טובה יותר אינה מוכיחה שמוצר גרם לשיפור, והיעדר תחושה אינו מוכיח שהמוצר אינו עושה דבר בשום כמות או צורה. שתי הטעויות נובעות מהתייחסות לתצפית יחידה ללא הסמיה כאל תוצאה. מה שחוות דעת יכולות להוסיף הוא סיבה לבדוק, ואזהרה שכדאי לפעול לפיה.