Is there a reproducibility crisis in science? - Matt Anticole

เกิดวิกฤติเรื่องความแม่นยำในการทำซ้ำขึ้นในวงการวิทยาศาสตร์อยู่หรือเปล่า - แมท แอนติโคล (Matt Anticol

Translator: Kelwalin Dhanasarnsombut Reviewer: Vera Chicharito

In 2011, a team of physicists reported a startling discovery:

ในปี ค.ศ. 2011 นักฟิสิกส์ รายงานการค้นพบที่น่าตกใจว่า

neutrinos traveled faster than the speed of light

นิวตริโนเดินทางได้เร็วกว่าความเร็วแสง

by 60 billionths of a second

ด้วยเวลาหนึ่งในหกหมื่นล้านวินาที

in their 730 kilometer trip from Geneva to a detector in Italy.

ในการเดินทางระยะทาง 730 กิโลเมตร จากเจนีวาไปยังเครื่องตรวจจับในอิตาลี

Despite six months of double checking, the bizarre discovery refused to yield.

แม้ว่าจะตรวจสอบซ้ำเป็นเวลาหกเดือน ผลลัพธ์อันน่าประหลาดนั้นก็ไม่เคยเกิดขึ้นอีก

But rather than celebrating a physics revolution,

แต่แทนที่พวกเขาจะฉลองให้กับ การค้นพบที่ปฎิวัติวงการฟิสิกส์นั้น

the researchers published a cautious paper

นักวิจัยตีพิมพ์เอกสารเพื่อเป็นการเตือน

arguing for continued research in an effort to explain the observed anomaly.

สนับสนุนการวิจัยต่อเนื่อง เพื่อหาคำอธิบายปรากฏการณ์ประหลาดนี้

In time, the error was tracked to a single incorrectly connected fiber optic cable.

ไม่นานนัก พวกเขาก็พบว่าความผิดพลาดนั้น เกิดจากใยแก้วนำแสงสายหนึ่งที่เชื่อมผิด

This example reminds us that real science is more than static textbooks.

ตัวอย่างนี้ย้ำเตือนเราว่า วิทยาศาสตร์ที่แท้จริงเป็นมากกว่าตำรานิ่ง ๆ

Instead, researchers around the world are continuously publishing

แต่ว่า นักวิจัยทั่วโลกกำลังตีพิมพ์

their latest discoveries

การค้นพบล่าสุดของพวกเขาอย่างต่อเนื่อง

with each paper adding to the scientific conversation.

ซึ่งแต่ละเอกสารนั้น เป็นส่วนหนึ่งในการสื่อสารเชิงวิทยาศาสตร์

Published studies can motivate future research,

การศึกษาที่ได้รับการตีพิมพ์ สามารถผลักดันงานวิจัยในอนาคต

inspire new products,

ให้แรงบันดาลใจ ในการพัฒนาผลิตภัณฑ์ใหม่

and inform government policy.

และให้ข้อมูล ในการวางนโยบายของรัฐบาล

So it's important that we have confidence in the published results.

ฉะนั้น ความมั่นใจต่อผลลัพธ์ ที่ถูกตีพิมพ์ออกมานั้นจึงสำคัญ

If their conclusions are wrong,

ถ้าการสรุปผลนั้นผิดพลาด

we risk time,

เราก็เสี่ยงต่อการเสียเวลา

resources,

แหล่งทรัพยากร

and even our health in the pursuit of false leads.

และแม้แต่สุขภาพของเรา ในการทำตามคำชี้แนะที่ผิด

When findings are significant,

เมื่อการค้นหาคำตอบนั้นมีความสำคัญ

they are frequently double-checked by other researchers,

พวกมันจึงมักถูกตรวจสอบซ้ำ ๆ โดยนักวิจัยคนอื่น ๆ

either by reanalyzing the data

ไม่ว่าจะเป็นด้วยการวิเคราะห์ข้อมูลซ้ำ

or by redoing the entire experiment.

หรือโดยการทำการทดลองทั้งหมดซ้ำ

For example, it took repeated investigation of the CERN data

ยกตัวอย่างเช่น ข้อมูลจาก CERN ถูกตรวจสอบครั้งแล้วครั้งเล่า

before the timing error was tracked down.

ก่อนที่ความผิดพลาดเรื่องเวลา จะถูกพบในที่สุด

Unfortunately, there are currently neither the resources nor professional incentives

น่าเสียดาย ที่ตอนนี้เราไม่มีทรัพยากร และผู้เชี่ยวชาญเพียงพอ

to double check the more than 1 million scientific papers published annually.

ที่จะตรวจสอบเอกสารทางวิทยาศาสตร์ ที่ถูกตีพิมพ์ปีละหลายล้านฉบับอีกครั้งได้

Even when papers are challenged, the results are not reassuring.

แม้แต่ตอนที่มีผู้แย้งว่าเอกสารนั้น ๆ มีผลการทดลองที่ไม่น่าเชื่อถือ

Recent studies that examined dozens of published pharmaceutical papers

การศึกษาเมื่อไม่นานมานี้พบว่า เอกสารทางเภสัชกรรมที่ถูกตีพิมพ์มากมาย

managed to replicate the results of less than 25% of them.

สามารถถูกทำซ้ำได้น้อยกว่า 25% ของจำนวนนั้น

And similar results have been found in other scientific disciplines.

สถานการณ์ก็คล้ายกัน สำหรับวิทยาศาสตร์ในแขนงอื่น ๆ

There are a variety of sources for irreproducible results.

การที่ผลลัพธ์ไม่อาจถูกทำซ้ำได้นั้น เป็นผลมาจากสาเหตุที่หลากหลาย

Errors could hide in their original design, execution, or analysis of the data.

ความผิดพลาดอาจถูกซ่อนอยู่ในการออกแบบ การดำเนินการ และการวิเคราะห์ข้อมูลเดิม

Unknown factors,

ปัจจัยที่เราไม่รู้

such as patients' undisclosed condition in a medical study,

เช่นภาวะของผู้ป่วยที่ไม่ได้รับการเปิดเผย ในการศึกษาทางการแพทย์

can produce results that are not repeatable in new test subjects.

สามารถทำให้ผลลัพธ์ไม่สามารถเกิดขึ้นซ้ำ ในการทดสอบกับผู้ป่วยอีกคนได้

And sometimes, the second research group can't reproduce the original results

และในขณะเดียวกัน กลุ่มการวิจัยที่สอง ไม่อาจได้ผลลัพธ์เช่นเดิม

simply because they don't know exactly what the original group did.

เพราะว่าพวกเขาไม่รู้ว่าจริง ๆ แล้ว กลุ่มวิจัยกลุ่มแรกทำการทดลองอย่างไร

However, some problems might stem from systematic decisions

อย่างไรก็ดี บางปัญหาอาจเกิดจาก การตัดสินใจเชิงระบบ

in how we do science.

ในการดำเนินการทางวิทยาศาสตร์

Researchers,

the institutions that employ them,

ตัวนักวิจัย

สถาบันที่จ้างพวกเขา

and the scientific journals that publish findings

และวารสารทางวิทยาศาสตร์ ที่ตีพิมพ์การค้นพบเหล่านั้น

are expected to produce big results frequently.

ถูกคาดหวังว่าจะผลิตผลลัพธ์ ที่มีความสำคัญอย่างสม่ำเสมอ

Important papers can advance careers,

เอกสารที่สำคัญสามารถที่จะ สนับสนุนความก้าวหน้าทางการงาน

generate media interest,

สร้างความสนใจต่อสื่อต่าง ๆ

and secure essential funding,

และเป็นหลักประกัน การได้รับเงินทุนที่สำคัญ

so there's slim motivation for researchers to challenge their own exciting results.

ฉะนั้น นักวิจัยจึงมีแรงจูงใจไม่มากนัก ต่อการโต้แย้งผลลัพธ์ที่น่าสนใจของตนเอง

In addition, little incentive exists

นอกจากนั้น มันมีแรงกระตุ้นเพียงน้อยนิด

to publish results unsupportive of the expected hypothesis.

ที่จะตีพิมพ์ผลลัพธ์ที่ไม่ได้สนับสนุน สมมติฐานที่คาดหวังเอาไว้

That results in a deluge of agreement between what was expected

นั่นเป็นผลให้เกิดความเห็นมากมาย ระหว่างสิ่งที่เราคาดหวัง

and what was found.

และสิ่งที่เราค้นพบ

In rare occasions, this can even lead to deliberate fabrication,

ในบางสถานการณ์ มันอาจนำเรา ไปสู่การไตร่ตรองการค้นพบ

such as in 2013, when a researcher spiked rabbit blood with human blood

ดังเช่นใน ปี ค.ศ. 2013 เมื่อนักวิจัย ใช้เลือดกระต่ายแทนเลือดมนุษย์

to give false evidence that his HIV vaccine was working.

เพื่อสร้างหลักฐานปลอมว่า วัคซีนป้องกันโรค HIV ได้ผล

The publish or perish mindset

แนวคิดเรื่องการตีพิมพ์หรือไม่ตีพิมพ์

can also compromise academic journals' traditional peer-review processes

ยังสามารถรบกวนกระบวนการตรวจสอบ โดยเพื่อนนักวิชาการ

which are safety checks

ซึ่งคือการตรวจสอบความถูกต้อง

where experts examine submitted papers for potential shortcomings.

ที่ผู้เชี่ยวชาญตรวจสอบเอกสาร ที่ถูกส่งเข้ามาเพื่อคัดเลือก

The current system,

ระบบในปัจจุบัน

which might involve only one or two reviewers,

ซึ่งใช้ผู้ตรวจสอบแค่หนึ่งหรือสองคน

can be woefully ineffective.

อาจไร้ประสิทธิภาพ

That was demonstrated in a 1998 study

นั่นถูกแสดงให้เห็นในการศึกษา ในปี ค.ศ. 1998

where eight weaknesses were deliberately inserted into papers,

เมื่อจุดอ่อนทั้งแปดอย่าง ถูกเขียนลงในเอกสารอย่างจงใจ

but only around 25% were caught upon review.

แต่ประมาณ 25% เท่านั้น ที่ถูกพบจากการตรวจสอบ

Many scientists are working toward improving reproducibility in their fields.

นักวิทยาศาสตร์มากมายกำลังพยายาม ปรับปรุงในเรื่องความแม่นยำในการทำซ้ำ

There's a push to make researchers raw data,

มีความพยายามผลักดันให้ข้อมูลดิบ

experimental procedures,

กระบวนการทดลอง

and analytical techniques more openly available

และเทคนิคในการวิเคราะห์ต่าง ๆ เข้าถึงได้ง่ายขึ้น

in order to ease replication efforts.

เพื่อที่จะทำให้การทำซ้ำ ทำได้ง่ายมากขึ้น

The peer review process can also be strengthened

การตรวจสอบโดยผู้เชี่ยวชาญในวงการ ยังสามารถถูกปรับปรุง

to more efficiently weed out weak papers prior to publication.

ให้มีประสิทธิภาพในการคัดเอกสาร ที่ด้อยคุณภาพออกไปก่อนมันจะถูกตีพิมพ์

And we could temper the pressure to find big results

และเรายังควรผ่อนปรนแรงกดดัน ในการหาผลลัพธ์ที่ยิ่งใหญ่

by publishing more papers that fail to confirm the original hypothesis,

โดยการตีพิมพ์เอกสารที่ไม่อาจยืนยัน สมมติฐานดั้งเดิมได้ให้มากกว่านี้

an event that happens far more than current scientific literature suggests.

สิ่งต่าง ๆ ที่เกิดขึ้นนอกกรอบ คำอธิบายทางวิทยาศาสตร์ที่มีอยู่ในตอนนี้

Science always has, and always will, encounter some false starts

วิทยาศาสตร์พบกับจุดเริ่มต้นที่ผิดพลาด ตลอดมา และจะคงเป็นเช่นนั้นตลอดไป

as part of the collective acquisition of new knowledge.

ในฐานะที่มันเป็นส่วนหนึ่งของการได้มา ซึ่งความรู้ในแบบสะสม

Finding ways to improve the reproducibility of our results

การหาทางปรับปรุง ผลลัพธ์ที่สามารถทำซ้ำได้

can help us weed out those false starts more effectively,

สามารถช่วยให้เรากำจัดจุดเริ่มต้นที่ผิดพลาด ได้มีประสิทธิภาพมากขึ้น

keeping us moving steadily toward exciting new discoveries.

ทำให้เราก้าวเดินไปข้างหน้าอย่างมั่นคง สู่การค้นพบใหม่ที่น่าตื่นเต้น