อ่าน 3 นาที
ผลกระทบจากการมองไปทางอื่น
ปรากฏการณ์การมองหาที่อื่น (look -elsewhere effect) เป็น ปรากฏการณ์ ในการวิเคราะห์ทางสถิติของ การทดลองทางวิทยาศาสตร์ ซึ่งการสังเกตที่ดูเหมือนจะ มีนัยสำคัญทางสถิติ...
ผลกระทบจากการมองไปทางอื่น
ปรากฏการณ์การมองหาที่อื่น (look -elsewhere effect)เป็นปรากฏการณ์ในการวิเคราะห์ทางสถิติของการทดลองทางวิทยาศาสตร์ซึ่งการสังเกตที่ดูเหมือนจะมีนัยสำคัญทางสถิติอาจเกิดขึ้นโดยบังเอิญเนื่องจากขนาดของพื้นที่พารามิเตอร์ที่ต้องค้นหา มีขนาดใหญ่มาก [ 1 ] [ 2 ] [ 3 ] [ 4 ] [ 5 ]
เมื่อยอมรับความเป็นไปได้ของข้อผิดพลาดจากการมองที่อื่นในการวิเคราะห์แล้ว ก็สามารถชดเชยได้ด้วยการประยุกต์ใช้เทคนิคทางคณิตศาสตร์มาตรฐานอย่างระมัดระวัง[ 6 ] [ 7 ] [ 8 ]
โดยทั่วไปในทางสถิติ คำนี้รู้จักกันในชื่อปัญหาของการเปรียบเทียบหลายรายการและได้รับความสนใจจากสื่อบ้างในปี 2011 ในบริบทของการค้นหาอนุภาคฮิกส์ที่เครื่องเร่งอนุภาคขนาดใหญ่[ 9 ]
ใช้
การทดสอบทางสถิติหลายอย่างให้ค่า p-valueซึ่งเป็นความน่าจะเป็นที่ผลลัพธ์ที่กำหนดจะเกิดขึ้นได้โดยบังเอิญ โดยสมมติว่าสมมติฐานที่ต้องการพิสูจน์นั้นเป็นเท็จ เมื่อถามว่า " Xส่งผลต่อYหรือไม่" โดยทั่วไปแล้วมักจะเปลี่ยนแปลงXและดูว่ามีการเปลี่ยนแปลงอย่างมีนัยสำคัญในYหรือไม่ หากค่า p-value น้อยกว่าเกณฑ์ความสำคัญทางสถิติ ที่กำหนดไว้ล่วงหน้า αเราจะถือว่าผลลัพธ์นั้น "มีนัยสำคัญ"
อย่างไรก็ตาม หากทำการทดสอบหลายครั้ง ("มองหาที่อื่น" หากการทดสอบครั้งแรกไม่สำเร็จ) ค่า pที่เท่ากับ 1/ nจะเกิดขึ้นหนึ่งครั้งต่อ การทดสอบ n ครั้ง ตัวอย่างเช่น เมื่อไม่มีผลกระทบที่แท้จริง เหตุการณ์ที่มีp < 0.05 จะยังคงเกิดขึ้นหนึ่งครั้งโดยเฉลี่ยต่อการทดสอบ 20 ครั้ง เพื่อชดเชยสิ่งนี้ ค่าเกณฑ์αสามารถหารด้วยจำนวนการทดสอบnได้ ดังนั้นผลลัพธ์จึงมีความสำคัญเมื่อp < α / nหรืออีกนัยหนึ่งคือ คูณ ค่า p ที่สังเกตได้ ด้วยจำนวนการทดสอบ (มีความสำคัญเมื่อnp < α )
นี่เป็นกรณีที่ทำให้ง่ายขึ้น ตัวเลขnจริงๆ แล้วคือจำนวนองศาอิสระในการทดสอบ หรือจำนวนการทดสอบที่เป็นอิสระอย่างแท้จริง หากการทดสอบเหล่านั้นไม่เป็นอิสระอย่างสมบูรณ์ ตัวเลขอาจน้อยกว่าจำนวนการทดสอบทั้งหมด
ปรากฏการณ์ "การมองหาที่อื่น" เป็นสาเหตุที่พบบ่อยของ "การขยายความสำคัญทางสถิติ" เมื่อจำนวนการทดสอบอิสระnถูกประเมินต่ำเกินไป เนื่องจากผลการทดสอบที่ล้มเหลวไม่ได้ถูกตีพิมพ์ บทความหนึ่งอาจไม่ได้กล่าวถึงสมมติฐานทางเลือกที่พิจารณา หรือบทความที่ไม่มีผลลัพธ์ใดๆ อาจไม่ได้รับการตีพิมพ์เลย ทำให้วารสารต่างๆ เต็มไปด้วยผลงานวิจัยที่ผิดปกติทางสถิติ
ตัวอย่าง
- การศึกษาของสวีเดนในปี 1992 พยายามที่จะตรวจสอบว่าสายส่งไฟฟ้าก่อให้เกิดผลกระทบต่อสุขภาพที่ไม่ดี หรือไม่ นักวิจัยได้สำรวจทุกคนที่อาศัยอยู่ภายในระยะ 300 เมตรจากสายส่งไฟฟ้าแรงสูงในช่วงระยะเวลา 25 ปี และมองหาอัตราการเพิ่มขึ้นที่มีนัยสำคัญทางสถิติของโรคต่างๆ มากกว่า 800 โรค การศึกษาพบว่าอุบัติการณ์ของโรคมะเร็งเม็ดเลือดขาวในเด็กสูงกว่าค่าเฉลี่ยถึงสี่เท่าในกลุ่มที่อาศัยอยู่ใกล้สายส่งไฟฟ้ามากที่สุด และกระตุ้นให้รัฐบาลสวีเดน เรียกร้องให้มีการดำเนินการ อย่างไรก็ตาม ปัญหาของข้อสรุปคือ พวกเขาไม่ได้ชดเชยผลกระทบจากการมองหาที่อื่น ในการรวบรวมตัวอย่างแบบสุ่ม 800 ตัวอย่าง มีโอกาสที่อย่างน้อยหนึ่งตัวอย่างจะมีค่าสูงกว่าค่าที่คาดไว้ถึง 3 ส่วนเบี่ยงเบนมาตรฐานโดยบังเอิญ การศึกษาต่อมาไม่สามารถแสดงให้เห็นถึงความเชื่อมโยงใดๆ ระหว่างสายส่งไฟฟ้ากับโรคมะเร็งเม็ดเลือดขาวในเด็ก ไม่ว่าจะเป็นในแง่ของสาเหตุหรือแม้แต่ความสัมพันธ์[ 10 ]

ลำดับตัวอักษรที่ห่างเท่ากัน "wiki" และ "Pedia" พบในพระคัมภีร์ปฐมกาลฉบับคิงเจมส์( 10:7-14) - ปรากฏการณ์รหัสพระคัมภีร์อ้างว่าพบกลุ่มคำที่มีนัยสำคัญผิดปกติซึ่งทำนายเหตุการณ์ในอนาคตที่ซ่อนอยู่ในข้อความของพระคัมภีร์ฮิบรูซึ่งนำมาเป็นลำดับตัวอักษรดิบที่ไม่มีช่องว่างและจัดเรียงเป็นตารางต่างๆ ที่มีสัดส่วนแตกต่างกัน อย่างไรก็ตาม ดังที่บทความในSkeptical Inquirerได้แสดงให้เห็น[ 11 ]วิธีนี้เท่ากับการสร้างตารางจำนวนมากเพื่อตรวจสอบรูปแบบหรือกลุ่มโดยการแบ่งสตริงข้อความทั้งหมดออกเป็นความกว้างตั้งแต่ไม่กี่ตัวอักษรไปจนถึงหลายแสนตัวอักษร โดยทำซ้ำความกว้างสำหรับแถวถัดไป จากนั้นแต่ละตารางจำนวนมากเหล่านั้นสามารถค้นหาคำที่น่าสนใจได้หลากหลายโดยการข้ามเป็นช่วงๆ ไปข้างหน้าหรือข้างหลังด้วยตัวอักษร x ตัวใดๆ ในข้อความ (หรือ x+1, x+2 เป็นต้น) ในอาร์เรย์ขนาดใหญ่ของ ความเป็นไปได้ที่ กำหนดพารามิเตอร์และคำที่น่าสนใจที่เกี่ยวข้องสามารถเป็นสตริงใดๆ ที่อยู่ใกล้เคียงในการข้ามตัวอักษร x+k หรือ y+k ไปข้างหน้าหรือข้างหลังโดยพลการ ทำให้ปริมาตรการเรียงสับเปลี่ยนมีขนาดใหญ่มาก ดังนั้น หากละเว้นคำถามที่เกี่ยวข้อง เช่นอคติในการยืนยันแม้ว่าจะไม่พบกลุ่มที่น่าสนใจหรือมีความสำคัญในตารางแรก การทำซ้ำครั้งต่อไปก็สามารถลองทำได้โดยใช้คอมพิวเตอร์ และทำเช่นนี้ต่อไปเรื่อย ๆจนกว่าจะพบกลุ่มที่ "น่าอัศจรรย์" หรือ "ไม่น่าจะเป็นไปได้" ในที่สุด ซึ่งมีผลเทียบเท่ากับการที่เมื่อได้ ไพ่ โป๊กเกอร์ ที่ไม่น่าสนใจ แล้ว ก็ทำซ้ำไปเรื่อย ๆ ในปริมาณมากเท่าที่จำเป็นจนกว่าจะได้ไพ่สเตรทฟลัช รอยัลฟลัช หรือแม้กระทั่งไพ่หลาย ๆ ใบเรียงกันแล้วจึงกล่าวว่าไพ่สำรับนั้นได้รับการดลใจจากพระเจ้าที่ทำให้ได้ผลลัพธ์เช่นนั้น ผู้เขียนบทความใน Skeptical Inquirer จึงสามารถบรรลุผลลัพธ์ที่เหมือนกันได้โดยการใช้ขั้นตอนวิธีค้นหาเดียวกันกับ ข้อความ ในพระคัมภีร์ฉบับคิงเจมส์ ภาษาอังกฤษ แทนที่จะใช้ฉบับภาษาฮีบรูที่อ้างว่าได้รับการดลใจจากพระเจ้า และจากนั้นก็ใช้ได้อย่างมีประสิทธิภาพเช่นเดียวกันกับข้อความตัวอย่างที่ธรรมดาและเป็นไปตามอำเภอใจของคำตัดสินของศาลฎีกาสหรัฐอเมริกา ในปี 1987 ในคดี Edwards v. Aguillard
ดูเพิ่มเติม
- การแก้ไขแบบบอนเฟอร์โรนี
- การขุดค้นข้อมูล
- กฎของจำนวนมากอย่างแท้จริง : เมื่อขนาดตัวอย่างใหญ่มากพอ สิ่งที่ไม่น่าเชื่อใดๆ ก็มีโอกาสเกิดขึ้นได้
- กฎของลิตเติลวูด : บุคคลใดๆ ก็ตามสามารถคาดหวังได้ว่าจะมี "ปาฏิหาริย์" เกิดขึ้นกับตนเองในอัตราประมาณเดือนละครั้ง
- ความเข้าใจผิดเรื่องมือปืนเท็กซัส
- ปัญหาการเปรียบเทียบหลายรายการ
ลิงก์ภายนอก
- การ์ตูน XKCD ที่แสดงให้เห็นถึงปรากฏการณ์ "มองไปที่อื่น"
สรุปเนื้อหา
ข้อมูลสำคัญจากบทความ
ข้อมูลสำคัญเกี่ยวกับ ผลกระทบจากการมองไปทางอื่น
ปรากฏการณ์การมองหาที่อื่น (look -elsewhere effect) เป็น ปรากฏการณ์ ในการวิเคราะห์ทางสถิติของ การทดลองทางวิทยาศาสตร์ ซึ่งการสังเกตที่ดูเหมือนจะ มีนัยสำคัญทางสถิติ...
ใช้
การทดสอบทางสถิติหลายอย่างให้ ค่า p-value ซึ่งเป็นความน่าจะเป็นที่ผลลัพธ์ที่กำหนดจะเกิดขึ้นได้โดยบังเอิญ โดยสมมติว่าสมมติฐานที่ต้องการพิสูจน์นั้นเป็นเท็จ เมื่อถามว่า " X ส่งผลต่อ Y หรือไม่" โดยทั่วไปแล้วมักจะเปลี่ยนแปลง X...
ตัวอย่าง
การศึกษาของสวีเดนในปี 1992 พยายามที่จะตรวจสอบว่า สายส่งไฟฟ้าก่อให้เกิดผลกระทบต่อสุขภาพที่ไม่ดี หรือไม่ นักวิจัยได้สำรวจทุกคนที่อาศัยอยู่ภายในระยะ 300 เมตรจากสายส่งไฟฟ้าแรงสูงในช่วงระยะเวลา 25 ปี และมองหาอัตราการเพิ่มขึ้นที่มีนัยสำคัญทางสถิติของโรคต่างๆ...
ดูเพิ่มเติม
การแก้ไขแบบบอนเฟอร์โรนี การขุดค้นข้อมูล กฎของจำนวนมากอย่างแท้จริง : เมื่อขนาดตัวอย่างใหญ่มากพอ สิ่งที่ไม่น่าเชื่อใดๆ ก็มีโอกาสเกิดขึ้นได้ กฎของลิตเติลวูด : บุคคลใดๆ ก็ตามสามารถคาดหวังได้ว่าจะมี "ปาฏิหาริย์" เกิดขึ้นกับตนเองในอัตราประมาณเดือนละครั้ง...
