العلم مليء بالأخطاء. صائدو الجوائز موجودون هنا للعثور عليهم

في عام 2010، أصدر اثنان من خبراء الاقتصاد المشهورين، كارمن راينهارت وكينيث روجوف، بحثا يؤكد ما كان يشتبه فيه العديد من الساسة المحافظين ماليا لفترة طويلة: أن النمو الاقتصادي لأي بلد يتراجع إذا ارتفع الدين العام فوق نسبة معينة من الناتج المحلي الإجمالي. وقد لقيت هذه الورقة آذاناً صاغية لدى جورج أوزبورن، الذي سيصبح مستشاراً للمملكة المتحدة قريباً، والذي استشهد بها عدة مرات في خطاب حدد فيه ما سيصبح كتاب قواعد اللعبة السياسي في عصر التقشف: خفض الخدمات العامة من أجل تسديد ديون الدولة. الدين الوطني.

كانت هناك مشكلة واحدة فقط فيما يتعلق بالبحث الذي قدمه راينهارت وروجوف. لقد أغفلوا عن غير قصد خمس دول من تحليلهم: حيث قاموا بتشغيل الأرقام في 15 دولة فقط بدلاً من العشرين التي اعتقدوا أنهم اختاروها في جدول البيانات الخاص بهم. وعندما عدل بعض الاقتصاديين الأقل شهرة هذا الخطأ، وعدد قليل من المخالفات الأخرى، اختفى الجزء الأكثر جذبا للانتباه من النتائج. وكانت العلاقة بين الدين والناتج المحلي الإجمالي لا تزال قائمة، ولكن التأثيرات المترتبة على الديون المرتفعة كانت أكثر دقة من حافة الهاوية الشديدة التي ألمح إليها أوزبورن في خطابه.

العلماء – مثلنا جميعًا – ليسوا محصنين ضد الأخطاء. يقول مالتي إلسون، الأستاذ بجامعة برن في سويسرا، الذي يدرس طرق البحث، من بين أمور أخرى: “من الواضح أن الأخطاء موجودة في كل مكان، وجزء صغير من هذه الأخطاء سيغير استنتاجات الأبحاث”. المشكلة هي أنه لا يوجد الكثير من الأشخاص الذين يبحثون عن هذه الأخطاء. تم اكتشاف أخطاء راينهارت وروجوف فقط في عام 2013 من قبل طالب اقتصاد طلب أساتذته من طلابه محاولة تكرار النتائج في أوراق اقتصادية بارزة.

بالتعاون مع زملائه الباحثين في مجال العلوم الفوقية روبن أرسلاند وإيان هوسي، أنشأ إلسون طريقة للعثور بشكل منهجي على الأخطاء في البحث العلمي. تم تصميم المشروع – المسمى ERROR – على غرار مكافآت الأخطاء في صناعة البرمجيات، حيث تتم مكافأة المتسللين للعثور على أخطاء في التعليمات البرمجية. في مشروع إلسون، يتم الدفع للباحثين مقابل البحث عن الأخطاء المحتملة، ويتم منحهم مكافآت مقابل كل خطأ يتم التحقق منه يكتشفونه.

جاءت الفكرة من مناقشة بين إلسون وأرسلاند، الذي يشجع العلماء على اكتشاف الأخطاء في عمله من خلال عرض شراء بيرة لهم إذا حددوا خطأ مطبعي (بحد أقصى ثلاثة أخطاء لكل ورقة) و400 يورو (430 دولارًا) للخطأ الذي قد يخطئ. يغير الاستنتاج الرئيسي للورقة. يقول إلسون: “كنا على علم بوجود أوراق بحثية في مجالات تخصصنا كانت معيبة تمامًا بسبب وجود أخطاء يمكن إثباتها، ولكن كان من الصعب للغاية تصحيح السجل”. يعتقد إلسون أن كل هذه الأخطاء العامة يمكن أن تشكل مشكلة كبيرة. إذا أنفقت باحثة دكتوراه شهادتها في السعي للحصول على نتيجة تبين أنها خطأ، فقد يصل ذلك إلى عشرات الآلاف من الدولارات المهدرة.

يقول هوسي، الباحث في العلوم الوصفية بمختبر إلسون في برن، إن تدقيق الأخطاء ليس جزءًا أساسيًا من نشر الأبحاث العلمية. عندما يتم قبول ورقة بحثية من قبل مجلة علمية – مثل طبيعة أو علوم– يتم إرسالها إلى عدد قليل من الخبراء في هذا المجال الذين يقدمون آرائهم حول ما إذا كانت الورقة عالية الجودة، وسليمة منطقيا، وتقدم مساهمة قيمة في هذا المجال. ومع ذلك، لا يقوم هؤلاء المراجعون عادةً بالتحقق من الأخطاء، وفي معظم الحالات لن يتمكنوا من الوصول إلى البيانات الأولية أو التعليمات البرمجية التي يحتاجون إليها لاستئصال الأخطاء.