مقال

ستة أشكال للمبالغة في عرض النتائج، وكيف تكتشفها قبل أن تصدّقها

المبالغة في عرض النتائج ليست تزويراً بل انحياز في الصياغة. ستة أشكال تجعل الورقة تبدو أقوى مما تدعمه بياناتها، ولكل شكل طريقة تكشفه بها.

  • د. محمد رائد الشامي
  • قراءة 7 دقائق
ستة أشكال للمبالغة في عرض النتائج، وكيف تكتشفها قبل أن تصدّقها — أكاديمية الشامي

تقرأ خلاصة ملخص تقول إن العلاج «خيار واعد وآمن»، ثم تفتح الجدول فتجد أن النتيجة الأساسية لم تبلغ الدلالة الإحصائية. الورقة لم تكذب، فالرقم موجود في مكانه. لكنها قدّمته بطريقة تجعله يبدو أقوى مما هو.

هذا ما يُسمّى المبالغة في العرض (Spin)، أي تقديم النتائج بطريقة تجعلها تبدو أقوى أو أهم مما تدعمه البيانات. وهي ليست تزويراً بل انحيازاً في الصياغة، ولذلك يصعب اكتشافها ويسهل الوقوع فيها.

وللمبالغة ستة أشكال تتكرّر في الأوراق المنشورة. لكلٍّ منها مظهر يُعرف به، وطريقة تكشفه بها.

تحويل التركيز إلى نتيجة ثانوية

تُعلن الدراسة في قسم المنهجية (Methods) نتيجتها الأساسية (Primary Outcome)، ثم تأتي غير دالّة إحصائياً (Not Statistically Significant). فتنتقل الخلاصة إلى نتيجة ثانوية جاءت دالّة إحصائياً، وتُقدَّم كأنها الخبر الرئيس.

وكيف تكتشفه؟ ابحث عن النتيجة الأساسية في المنهجية، ثم اقرأ رقمها في النتائج. فإن لم تجدها في الخلاصة، فاسأل لماذا غابت.

إبراز مجموعة فرعية

النتيجة في العيّنة كلها غير لافتة، لكن فئة واحدة منها جاءت دالّة إحصائياً، فيصير التركيز عليها.

وكيف تكتشفه؟ اسأل أولاً إن كان تحليل هذه المجموعة معلناً مسبقاً. ثم اسأل إن كان في الورقة اختبار تفاعل (Interaction Test) يُظهر أن الأثر فيها يختلف فعلاً عن غيرها.

لغة سببية في تصميم رصدي

دراسة مقطعية تُختم بعبارة مثل «يؤدي إلى». التصميم يسمح بالحديث عن ارتباط، والصياغة تتحدّث عن سبب.

وكيف تكتشفه؟ حدّد التصميم أولاً، ثم اقرأ أفعال المناقشة. فالسؤال الذي يجيب عنه كل تصميم هو ما يحدّد سقف استنتاجه، وهذا ما يشرحه مقال كيف تختار تصميم دراستك؟

الأثر النسبي وحده

«انخفاض 30%» رقم لافت. لكن الانخفاض النسبي وحده لا يخبرك بشيء عن الأثر الحقيقي على مريضك، لأن معناه يتوقّف على الخطر في مجموعة المقارنة.

فالانخفاض النسبي نفسه، 30%، قد يقابله انخفاض مطلق قدره 12 نقطة مئوية، وقد يقابله انخفاض لا يتجاوز 0.12 نقطة. ومعه يقفز عدد اللازم علاجهم (Number Needed to Treat) من 8 إلى 833، وهو عدد المرضى الذين تعالجهم لتمنع حدثاً واحداً.

وكيف تكتشفه؟ كلما رأيت أثراً نسبياً بلا أثر مطلق، ابحث عن الخطر في مجموعة المقارنة واحسب الفرق بنفسك. وغياب الأثر المطلق من ورقة أو من عنوان صحفي ليس صدفة غالباً.

«غير دالّ إحصائياً» يُقرأ «متساوٍ»

تجربة صُمّمت لتُثبت أن علاجاً أفضل من آخر، وهي ما يُسمّى تجربة التفوّق (Superiority Trial). جاءت نتيجتها غير دالّة إحصائياً، فكتب المؤلف أنه «لا فرق بين العلاجين».

وهذا أخطر الأشكال الستة. فتجربة التفوّق غير الدالّة إحصائياً تعني «لم نُثبت فرقاً»، ولا تعني «العلاجان متساويان». وإثبات التكافؤ يحتاج تصميماً مختلفاً، وهامشاً محدّداً مسبقاً.

وكيف تكتشفه؟ انظر إلى عرض فترة الثقة. فهي التي تخبرك إن كانت الدراسة قد استبعدت فرقاً مهماً فعلاً، أم أنها لم تكن قادرة على الحكم أصلاً. والفرق بين الحالتين يشرحه مقال ثلاثة تفسيرات خاطئة لـ p-value.

استنتاج أوسع من العيّنة

توصية عامة لكل المرضى، من دراسة أُجريت في مركز واحد.

وكيف تكتشفه؟ راجع معايير الأهلية والمجتمع المدروس لتعرف من دخل الدراسة ومن استُبعد منها، ثم اسأل نفسك إن كان هؤلاء يشبهون مرضاك.

أين تختبئ المبالغة؟

لا تبحث عنها في كل سطر، فهي تتجمّع في خمسة مواضع بعينها.

الموضعما تفحصه
العنوانهل يذكر نتيجة لم تكن النتيجة الأساسية؟
خلاصة الملخصهل تتطابق مع الأرقام في نتائج الملخص نفسه؟
الفقرة الأولى من المناقشةهل تبدأ بنتيجة أم بمبالغة؟
خلاصة المناقشةهل تتجاوز ما عُرض في النتائج؟
البيان الصحفي للمؤسسةغالباً أشد مبالغة من الورقة نفسها

تفكيك خلاصة واحدة

خذ هذه الخلاصة من ملخص ورقة، وهي تقول «يمثّل هذا العلاج خياراً واعداً وآمناً لمرضى المرحلة المتقدمة، ويُنصح بالنظر في إدراجه ضمن البروتوكولات العلاجية».

ثم انظر إلى ما يظهر عند فحص الورقة نفسها.

ما قالته الورقةما تكشفه الأرقام
«خيار واعد»النتيجة الأساسية لم تبلغ الدلالة الإحصائية (p = 0.11)
«فعّال في مرضى المرحلة المتقدمة»نتيجة مجموعة فرعية غير معلنة مسبقاً
«آمن»جدول الأضرار يعرض الأحداث الجسيمة فقط لا كلها
«يُنصح بإدراجه»دراسة واحدة مفتوحة التسمية بلا تعمية

أربع كلمات في جملة واحدة، ووراء كل كلمة شكل من أشكال المبالغة. فالأولى تحويل للتركيز، والثانية إبراز لمجموعة فرعية، والثالثة عرض انتقائي للأضرار، والرابعة استنتاج أكبر من الدليل.

اختبار الجملة الواحدة

هذه أداة تأخذها معك إلى أي ورقة، ولا تحتاج أكثر من دقيقة.

  1. اقرأ خلاصة الملخص أولاً.
  2. غطِّها، واقرأ جدول النتيجة الأساسية.
  3. اكتب أنت خلاصة من سطر واحد.
  4. قارن ما كتبتَه بما كتبه المؤلف.

في المثال السابق، ستكتب أنت «في تجربة مفتوحة التسمية، لم يبلغ الفرق في النتيجة الأساسية الدلالة الإحصائية». ضع الجملتين متجاورتين، فالفجوة بينهما هي مقدار المبالغة.

وإن كنت أنت كاتب الورقة

الأشكال الستة نفسها تصير قائمة تفحص بها ورقتك قبل أن ترسلها.

  1. خلاصتك تبدأ بالنتيجة الأساسية التي أعلنتها في المنهجية، دالّةً إحصائياً كانت أو غير دالّة.
  2. أي مجموعة فرعية تُبرزها أعلنتها مسبقاً، ومعها اختبار تفاعل.
  3. أفعال مناقشتك على قدر تصميمك، فالدراسة الرصدية تتحدّث عن ارتباط لا عن سبب.
  4. كل أثر نسبي تذكره، معه الأثر المطلق.
  5. تكتب «لم نُثبت فرقاً» لا «لا فرق»، ومعها فترة الثقة.
  6. توصيتك على قدر المجتمع الذي درسته.

فالمحكّم يقرأ ورقتك بهذه العين نفسها، كما في مقال ما الذي يجعلني أرفض ورقة في أول دقيقتين. وما تصلحه أنت قبل الإرسال لا يكتبه هو في تقريره.

اقرأ الورقة قبل أن تصدّق خلاصتها

هذا المقال مستخرَج من دليل قراءة الورقة العلمية وتقييمها النقدي، الذي يمشي معك من استراتيجية القراءات الثلاث، إلى أداة التقييم المناسبة لكل تصميم، والتحيّزات التي تبحث عنها، وقراءة الأرقام، حتى إدارة جلسة نادي المجلة وكتابة تقرير التحكيم. ولأن كشف المبالغة يبدأ من معرفة ما يسمح به كل تصميم، فإن دورة علم الوبائيات التطبيقي تشرح التصاميم والتحيّز والإرباك والفرق بين الارتباط والسببية.

أفادك المقال؟ شاركه:
مرحباً! أنا شوشو 👋 لستَ متأكداً من أين تبدأ؟ اسألني وأدلّك على ما يناسب مرحلتك.