كيف تكتشف دراسة ضعيفة وراء ادعاء عن مكمّل غذائي؟

ادعاء المكمّل الغذائي لا يفوق في قوته الدراسة التي يقوم عليها، وفي أغلب الأحيان يمكنك الحكم على تلك الدراسة في دقيقتين تقريبًا دون أي تدريب علمي. اسأل سبعة أشياء: هل أُجريت على البشر أم على الحيوانات والخلايا، وكم عدد من شاركوا فيها، وهل قاست شيئًا يلاحظه الإنسان فعلًا أم مجرد رقم في عينة دم، وهل كانت النتيجة هي التي انطلق الباحثون للبحث عنها، وهل سُجّلت التجربة قبل أن تبدأ، ومن موّلها، وهل توصّل أحد آخر إلى النتيجة نفسها منذ ذلك الحين. يوضّح هذا المقال كيف تطبّق تلك القائمة، مع الأدلة المنشورة على أهمية كل سؤال، ثم يطبّقها على ادعاءاتنا نحن.

أولًا: اقرأ ما اختبرته الدراسة فعلًا

تبدأ كل قصة مخيّبة عن المكمّلات تقريبًا بعدم تطابق بين الجملة المكتوبة على العلبة والجملة الواردة في الدراسة. أعطت الدراسة 3 غرامات يوميًا لمدة اثني عشر أسبوعًا لشبان مدرّبين، بينما توحي العلبة بفائدة عند 500 ملغ للجميع. أو استخدمت الدراسة شكلًا يُعطى بالحقن والمنتج كبسولة. أو ظهر الأثر بعد ستة أشهر والتسويق يوحي بأسبوع.

لذلك قبل أن تحكم على جودة دراسة، دوّن منها أربعة أشياء: الفئة المدروسة (مَن)، والجرعة والشكل (ماذا)، والمدة (كم طالت)، والنتيجة المقيسة (ما الذي تغيّر). فإذا اختلف أي من هذه الأربعة اختلافًا ذا معنى عن الطريقة التي يُباع بها المنتج لك، فقد تكون الدراسة علمًا سليمًا تمامًا ومع ذلك لا تدعم الادعاء المبني عليها. في تلك الفجوة يعيش معظم تسويق المكمّلات، وهي ليست إخفاقًا علميًا على الإطلاق، بل إخفاق بلاغي.

السؤال 1: هل أُجريت على البشر؟

أُجري جزء كبير جدًا من علم المكوّنات المقتبس في تسويق المكمّلات على الخلايا أو على القوارض. وهذا البحث مشروع وضروري، لكنه مولّد للفرضيات لا دليل على فائدة بشرية.

يأتي أوضح مثال من مراجعة منهجية في BMJ قارنت التجارب على الحيوانات بالتجارب البشرية للعلاجات نفسها. فالتيريلازاد مثلًا خفّض حجم الاحتشاء بنسبة 29% وحسّن درجات السلوك العصبي بنسبة 48% في نماذج حيوانية للسكتة الدماغية. أما لدى المرضى فقد ارتبط بنتيجة أسوأ. وبدت الكورتيكوستيرويدات لإصابات الرأس مفيدة في الحيوانات (نسبة أرجحية مجمّعة 0.58 لنتيجة وظيفية سيئة) ولم تُظهر أي فائدة في التجارب السريرية. وخلص المؤلفون إلى أن هذا التعارض قد يعكس تحيزًا في الدراسات الحيوانية أو عجز النماذج الحيوانية عن محاكاة المرض البشري بدقة كافية.

قاعدة عملية: إذا كان الدليل الوحيد على مكوّن ما دراسة على الفئران أو طبق زرع، فعامل الادعاء بوصفه سؤالًا مفتوحًا لا نتيجة مستقرة. وهذا الحدس مقنّن أصلًا في قانون الغذاء الأوروبي، لأن الادعاءات الصحية التي يجوز قانونًا أن تظهر على مكمّل تُقيَّم من قبل EFSA وفق مجموعة منشورة من المبادئ العلمية، والحصيلة سجل عام لما هو مرخّص وما هو غير مرخّص. وقد كتبنا عن الجانب القانوني لذلك على حدة في أي كلمات ملصقات المكمّلات معرّفة قانونًا.

السؤال 2: كم عدد من شاركوا فيها؟

حجم العينة هو أسهل مؤشر جودة يمكن التحقق منه على الإطلاق، وهو يفعل أكثر مما تتوقع. أظهر تحليل واسع الاستشهاد في Nature Reviews Neuroscience أن متوسط القوة الإحصائية للدراسات في مجال بأكمله كان منخفضًا جدًا، وأوضح النتيجتين المترتبتين على ذلك: مبالغة في تقدير أحجام الأثر وضعف في قابلية التكرار. والقوة المنخفضة لا تعني فقط أن أثرًا حقيقيًا قد يفوت. بل تعني أيضًا أن الدراسة الصغيرة حين تبلّغ عن نتيجة ذات دلالة، يكون الأرجح أن تلك النتيجة مبالغ فيها، أو خاطئة ببساطة.

لهذا يمكن للمكوّن نفسه أن يبدو مبهرًا في تجربة تقاطعية على 20 شخصًا وعاديًا في تجربة عشوائية على 400 شخص. التجربة الأكبر ليست متشائمة، بل دقيقة.

دليل عمل تقريبي لدراسة عن عنصر غذائي: أقل من نحو 30 مشاركًا يعني معاملة أي حجم أثر على أنه مؤقت، ومع بضع مئات من المشاركين ومجموعة ضابطة تبدأ الأرقام بالاستقرار. ولاحظ اتجاه التحيز، لأنه مهم عند قراءة التسويق: الدراسات الصغيرة لا تخطئ عشوائيًا، بل تخطئ صعودًا.

السؤال 3: هل قاست شيئًا ستلاحظه؟

هناك فرق حقيقي بين نتيجة تهمّك (ركضت مسافة أطول، نمت الليل كله، أُصبت بنزلات برد أقل) ومؤشر بديل (ارتفع مستوى في الدم، انخفض إنزيم، تحسّن اختبار لمضادات الأكسدة).

المؤشرات البديلة مفيدة. ورفع مستوى منخفض من عنصر غذائي في الدم هدف مشروع بحد ذاته. لكنها تجمّل التدخلات بصورة منهجية. قارنت دراسة وبائية منهجية في BMJ تجارب في ست مجلات عالية التأثير ووجدت أن التجارب التي أبلغت عن نتائج أولية بديلة أبلغت عن آثار علاجية أكبر (نسبة أرجحية 0.51) من التجارب التي أبلغت عن نتائج تهمّ المرضى مباشرة (نسبة أرجحية 0.76)، أي نسبة نسب أرجحية تبلغ 1.47 (فاصل ثقة 95% من 1.07 إلى 2.01) صمدت بعد التعديل. وكانت تجارب المؤشرات البديلة أصغر أيضًا: وسيط حجم العينة 371 مقابل 741.

لذلك حين يُباع منتج بعبارة «ثبت سريريًا أنه يرفع X في الدم»، فالترجمة الأمينة هي: لقد غيّر رقمًا. وأما هل يترجم ذلك الرقم إلى شيء تشعر به فسؤال منفصل قد لا تكون الدراسة قد طرحته. وتُعدّ أقراص الهيدروجين لدينا مثالًا جيدًا على فئة يكون فيها كثير من العمل المنشور قصيرًا وصغيرًا وقائمًا على المؤشرات، وهو بالضبط سبب وصفنا لها وصفًا واقعيًا بدل الوعد بنتيجة. وقد راجعنا تلك الأدبيات بالتفصيل في ما تقوله أبحاث ماء الهيدروجين فعلًا.

السؤال 4: هل كانت هذه هي النتيجة التي بحثوا عنها؟

تعلن التجربة عن نتيجة أولية مسبقًا. وما يُنشر لا يطابق ذلك دائمًا. في دراسة أترابية شملت 102 تجربة وافقت عليها لجان الأخلاقيات الدنماركية، قارن الباحثون البروتوكولات بالأوراق المنشورة: 62% من التجارب كان فيها نتيجة أولية واحدة على الأقل جرى تغييرها أو استحداثها أو حذفها. ونصف نتائج الفعالية و65% من نتائج الضرر في كل تجربة أُبلغ عنها بصورة ناقصة تحول دون استخدامها في تحليل تجميعي، وكانت النتائج ذات الدلالة الإحصائية أكثر احتمالًا للإبلاغ الكامل بنحو 2.4 مرة من النتائج غير الدالة (4.7 مرة بالنسبة للأضرار). وعند سؤالهم مباشرة، أنكر 86% من الباحثين المستجيبين أن أي نتائج لم يُبلَّغ عنها.

لا يمكنك تدقيق البروتوكولات بنفسك. لكن ما يمكنك فعله هو ملاحظة الإشارة: نتيجة رئيسية تبدو غريبة بالنسبة إلى الهدف المعلن للتجربة، أو ورقة يحتفي ملخصها بنتيجة تبدو كأنها فكرة لاحقة.

السؤال 5: المجموعة كاملة أم شريحة منها؟

«نجح لدى النساء فوق سن 50 ذوات المستويات الأساسية المنخفضة» قد تكون نتيجة حقيقية أو رحلة صيد. قيّمت مراجعة منهجية في BMJ كل ادعاء عن مجموعة فرعية في تجارب عشوائية نُشرت في مجلات سريرية أساسية: من 207 تجارب أبلغت عن تحليلات مجموعات فرعية، قدّمت 64 تجربة ادعاءً بشأن النتيجة الأولية. وبالقياس إلى عشرة معايير للمصداقية، استوفى 84% من تلك الادعاءات أربعة معايير أو أقل. و41% فقط من الادعاءات كانت قد حدّدت الفرضية مسبقًا بوضوح، و6% فقط تنبأت بالاتجاه تنبؤًا صحيحًا سلفًا، و9% فقط كانت مدعومة باختبار تفاعل ذي دلالة إحصائية.

وينطبق الحدس نفسه على طريقة تحليل البيانات. أظهر التنقيب النصي في الأدبيات العلمية أن p-hacking، أي جمع أو انتقاء البيانات والتحليلات حتى تصبح نتيجة غير دالة نتيجة دالة، منتشر على نطاق واسع. وإنصافًا، خلص التحليل نفسه إلى أن أثر p-hacking يبدو ضعيفًا مقارنة بأحجام الأثر الحقيقية، وأنه على الأرجح لا يقلب الاستنتاجات المستخلصة من تحليلات تجميعية جيدة. فعامله سببًا لعدم الثقة بأوراق منفردة لافتة، لا سببًا لعدم الثقة بالعلم.

السؤال 6: هل سُجّلت التجربة قبل أن تبدأ؟

التسجيل المسبق أرخص فحص نزاهة موجود، ويمكنك التحقق منه في دقيقة. تشترط المجلات الطبية التي تتبع توصيات ICMJE التسجيل في سجل عام عند موافقة أول مريض على المشاركة أو قبلها، بوصف ذلك شرطًا للنشر، ويشمل تعريف ICMJE للتجربة السريرية التدخلات الغذائية صراحةً.

التجربة المسجّلة لديها سجل عام لما نوت قياسه قبل أن تعرف الجواب. فإذا كان لدراسة مكمّل رقم تسجيل، أمكنك مقارنة النية بالنتيجة. وإذا لم يكن لها رقم، فأنت تثق بذاكرة المؤلفين عن خطتهم.

السؤال 7: من دفع، وهل يظهر ذلك؟

التمويل ليس سببًا للاستبعاد. لا بد لأحد أن يدفع تكاليف البحث، والمصنّعون يمولون قدرًا كبيرًا منه. لكن أثر التمويل قابل للقياس، وهو ليس صغيرًا. وجدت مراجعة منهجية لكوكرين شملت 75 دراسة أن دراسات الأدوية والأجهزة التي ترعاها الصناعة كانت نتائج فعاليتها مواتية أكثر (نسبة خطر 1.27، فاصل ثقة 95% من 1.17 إلى 1.37) واستنتاجاتها مواتية أكثر (نسبة خطر 1.34، من 1.19 إلى 1.51) من الدراسات الممولة من مصادر أخرى. ولاحظ المراجعون أن هذا التحيز لم تفسّره التقييمات المعيارية لخطر التحيز، وأن الاستنتاجات في الدراسات التي ترعاها الصناعة اتفقت مع النتائج الفعلية بمعدل أقل.

والتغذية ليست استثناءً. وجدت دراسة شملت 206 مقالات عن المشروبات الغازية والعصير والحليب أنه بين الدراسات التدخلية، كانت نسبة الاستنتاجات غير المواتية 0% حين كان التمويل كله من الصناعة، مقابل 37% حين لم يكن هناك أي تمويل صناعي. وبلغت نسبة الأرجحية لاستنتاج مواتٍ مقابل غير مواتٍ 7.61 (فاصل ثقة 95% من 1.27 إلى 45.73).

لذا اقرأ بيان التمويل، وزِن الاستنتاج لا البيانات. فالتجارب الممولة من الصناعة كثيرًا ما تكون جيدة التنفيذ. التفسير، أكثر من القياس، هو ما ينحرف.

السؤال 8: هل هي دراسة واحدة أم مجموعة أدلة؟

الدراسات المفردة أضعف وحدة في المعرفة العلمية، والأدبيات التي تراها ليست الأدبيات الموجودة. في تحليل شمل 74 تجربة لمضادات الاكتئاب مسجّلة لدى FDA، لم يُنشر 31% منها إطلاقًا. وبقراءة الأدبيات المنشورة وحدها، بدت 94% من التجارب إيجابية؛ ووفق تحليل FDA نفسها، كانت 51%. وبمقارنة مجموعتي البيانات، كان حجم الأثر المنشور متضخمًا بنسبة 32% إجمالًا.

هذا هو تحيز النشر في فقرة واحدة، وهو سبب كون دراسة إيجابية واحدة، مهما كانت أنيقة، أساسًا ضعيفًا. وقد طُرحت النسخة النظرية من هذه الحجة في ورقة كثيرة الاستشهاد من عام 2005 ترى أن النتيجة البحثية تكون أقل احتمالًا للصحة حين تكون الدراسات في مجال ما صغيرة، وحين تكون أحجام الأثر صغيرة، وحين تكون المرونة أكبر في التصاميم والتحليلات. وأبحاث المكمّلات تحمل هذه الخصائص الثلاث أكثر مما نودّ.

الخطوة العملية: ابحث عن مراجعة منهجية أو تحليل تجميعي بدل دراسة واحدة. وإذا كان الدعم الوحيد لادعاء ما تجربة واحدة، فالكلمة الأمينة هي «واعد» لا «مثبت».

والآن طبّق الاختبار علينا

قائمة تحقق لا توجّهها إلى نفسك أبدًا مجرد زينة. لذا، باختصار وأمانة:

• الكرياتين. يحمل كرياتين مونوهيدرات لدينا الادعاء الأوروبي المرخّص الوحيد للكرياتين: الكرياتين يزيد الأداء البدني في نوبات متتالية من التمارين قصيرة الأمد وعالية الشدة. وهذا الادعاء موجود لأنه صمد أمام النوع نفسه من التدقيق الموصوف أعلاه: تجارب بشرية متكررة، ونتيجة أداء حقيقية بدل مؤشر في الدم، وتقييم وفق مبادئ EFSA المنشورة. وهو ادعاء ضيق أيضًا، ونحن لا نمطّه.
• المغنيسيوم. يذكر مركّب المغنيسيوم لدينا إسهامات في وظيفة العضلات والجهاز العصبي الطبيعية وفي تقليل الإرهاق والتعب. وهذه ادعاءات وظيفية مرخّصة للعناصر الغذائية، وهي عتبة مختلفة وأدنى من «هذا المنتج سيجعلك تشعر بفرق». فهي تصف ما يفعله العنصر الغذائي في الجسم، لا ما ستفعله حبة بعينها بأسبوعك.
• الشيلاجيت. لا يوجد ادعاء صحي أوروبي مرخّص لـالشيلاجيت، لذلك لا نقدّم أي ادعاء. وتصف صفحة المنتج ما هو وكيف يُختبر. وأي علامة تجارية تخبرك بما يفعله الشيلاجيت لطاقتك أو هرموناتك تتجاوز ما حُكم بأن الأدلة تدعمه.

وإذا طبّقت الأسئلة السبعة على تسويقنا ووجدت شيئًا يرسب فيها، فتلك نتيجة حقيقية ونودّ أن نسمع عنها.

الأسئلة الشائعة

هل نشر الدراسة في مجلة شهيرة يعني تلقائيًا أن النتيجة متينة؟

لا. فمراجعة تحليلات المجموعات الفرعية ودراسة النتائج البديلة المذكورتان أعلاه فحصتا كلتاهما تجارب في مجلات سريرية أساسية وعالية التأثير، ومع ذلك وجدتا مشكلات مصداقية كبيرة. مكانة المجلة تخبرك عن المنافسة على المساحة، لا عمّا إذا كانت نتيجة بعينها ستصمد.

كم عدد المشاركين الكافي؟

لا يوجد رقم عالمي، لأن ذلك يعتمد على حجم الأثر الحقيقي ومدى تباين النتيجة. وكعادة قراءة: دون نحو 30 مشاركًا، عامل حجم أي أثر على أنه غير موثوق؛ فالأدلة المنشورة واضحة في أن الدراسات منخفضة القوة تبالغ في تقدير الآثار بصورة منهجية. ومع بضع مئات من المشاركين ومجموعة ضابطة يمكنك أن تبدأ بأخذ المقدار على محمل الجد.

هل البحث الممول من الصناعة عديم القيمة؟

لا، ومعاملته على هذا النحو ستترك لك قدرًا ضئيلًا جدًا من أبحاث التغذية. النمط المقاس هو أن الدراسات التي ترعاها الصناعة تبلّغ أكثر عن نتائج مواتية، وبقدر أقوى عن استنتاجات مواتية. والرد المعقول هو قراءة الأرقام وخصم قسم المناقشة، لا التخلص من الورقة.

ما الفرق بين ادعاء صحي ونتيجة دراسة؟

نتيجة الدراسة قياس واحد في فئة واحدة. أما الادعاء الصحي المرخّص في الاتحاد الأوروبي فهو صياغة جرى تقييمها مركزيًا وأُدرجت في سجل عام، مع شروط استخدام مرفقة (مثلًا حد أدنى للكمية اليومية). ويجوز لعلامة تجارية أن تقتبس لك دراسة بحرية، لكن لا يجوز لها أن تستخدم على المنتج سوى الصياغة المرخّصة. والتحقق مما إذا كان الادعاء واردًا في السجل الأوروبي غالبًا أسرع من قراءة الدراسة.

هل يمكن أن ينفع مكمّل حتى لو كانت الأدلة ضعيفة؟

ربما، وهذه الأمانة تعمل في الاتجاهين. غياب الأدلة الجيدة ليس دليلًا على الغياب. لكنك أنت من يدفع، وقاعدة الأدلة الضعيفة تعني أنك تموّل فرضية. وهذا خيار مشروع إن اتخذته عن علم، وهو سبب تفضيلنا وصف مكوّن وصفًا واقعيًا بدل تلبيس الفرضية ثوب الوعد.

أين يمكنني التحقق مما إذا كان الادعاء مسموحًا أصلًا؟

تحتفظ المفوضية الأوروبية بـسجل عام للادعاءات الصحية المرخّصة والمرفوضة. ابحث عن العنصر الغذائي، واقرأ الصياغة المسموحة بالضبط وشروط الاستخدام، وقارنها بالجملة المكتوبة على المنتج الذي تنظر إليه.

الخلاصة

لست بحاجة إلى قراءة أقسام المنهجية لتحمي نفسك. اسأل هل أُجريت الدراسة على البشر، وكم كان عددهم، وهل قاست شيئًا ستلاحظه أم مجرد مؤشر، وهل كانت النتيجة هي التي انطلقوا للبحث عنها، وهل سُجّلت التجربة مسبقًا، ومن دفع، وهل كرّرها أحد. كل سؤال من هذه الأسئلة يقابل نمط إخفاق موثقًا ومقيسًا في الأدبيات المنشورة. ومعظم ادعاءات المكمّلات التي تنهار تنهار عند السؤال الأول أو الثاني، قبل الحاجة إلى أي شيء تقني بوقت طويل. والادعاء الذي يصمد أمام الأسئلة السبعة كلها يستحق أن يُؤخذ على محمل الجد، أيًا كان بائعه.

المصادر

1. Perel P, et al. Comparison of treatment effects between animal experiments and clinical trials: systematic review. BMJ, 2007.
2. Button KS, et al. Power failure: why small sample size undermines the reliability of neuroscience. Nature Reviews Neuroscience, 2013.
3. Ciani O, et al. Comparison of treatment effect sizes associated with surrogate and final patient relevant outcomes in randomised controlled trials: meta-epidemiological study. BMJ, 2013.
4. Chan AW, et al. Empirical evidence for selective reporting of outcomes in randomized trials: comparison of protocols to published articles. JAMA, 2004.
5. Sun X, et al. Credibility of claims of subgroup effects in randomised controlled trials: systematic review. BMJ, 2012.
6. Head ML, et al. The extent and consequences of p-hacking in science. PLoS Biology, 2015.
7. ICMJE. Clinical Trial Registration, Recommendations for the Conduct, Reporting, Editing and Publication of Scholarly Work in Medical Journals.
8. Lundh A, et al. Industry sponsorship and research outcome. Cochrane Database of Systematic Reviews, 2017.
9. Lesser LI, et al. Relationship between funding source and conclusion among nutrition-related scientific articles. PLoS Medicine, 2007.
10. Turner EH, et al. Selective publication of antidepressant trials and its influence on apparent efficacy. New England Journal of Medicine, 2008.
11. Ioannidis JPA. Why most published research findings are false. PLoS Medicine, 2005.
12. EFSA NDA Panel. General scientific guidance for stakeholders on health claim applications (Revision 1). EFSA Journal, 2021.

هذه المقالة معلومات عامة عن قراءة الأبحاث، وليست نصيحة طبية. المكمّلات الغذائية ليست بديلًا عن نظام غذائي متنوع ومتوازن ونمط حياة صحي.