Nature:P值争议新一季:我们是否需要一个统一的P值阈值?

2017-10-30 Nature自然科研 Nature自然科研

一部分科学家反对进一步提高统计显着性发现的认定标准。

一部分科学家反对进一步提高统计显着性发现的认定标准。

何为“显着性”发现?研究人员对此意见不一。今年7月,72名研究人员将目标锁定P值,呼吁降低这个常用却饱受诟病的统计数值的阈值。9月18日,88名研究人员回应表示,更好的解决方式是让学者证明他们使用某个特定P值的合理性,而不是随意采用一个阈值。

几十年来,P值一直被用于衡量显着性,但是学者越来越意识到它的缺陷以及它被滥用的可能。2015年,一本心理学期刊全面禁止使用P值。

P值被用来检验“零假设”,一个假定被检测的现象之间不存在任何关联的默认状态。P值越小,结果为随机产生的可能性越小——假定该零假设是真的。当P值小于0.05时,结果通常被认为“具有统计显着性”——零假设被推翻。

7月,一些研究人员(包括积极推动提高研究结果再现性的人)在PsyArXiv预印本平台发表了一篇评论文章(之后发表在《自然-人类行为》上),认为该阈值应该降低至0.005,以防止假阳性出现在社会科学和生物医学文献中。

但是,该文章的第一作者、荷兰爱因霍芬科技大学的实验心理学家Daniel Lakens说:“在所有科学领域都推行一个阈值太极端了。”“当你让大家解释自己的研究时,科学就会进步,”他补充道。

意外后果

一些研究人员担心降低P值阈值会加剧“发表偏倚”(包含阴性结果的研究得不到发表)。更严格的P值阈值也有可能导致更多的假阴性——称一种实际存在的现象不存在。“在你执行任何一条政策前,你必须确定不会产生任何预期之外的负面结果,”Lakens说。

他和同事提出,研究人员应该在收集数据前,选择他们实验的P值阈值,并说明理由。阈值的大小将基于研究发现的潜在影响力以及它的惊人程度等因素。这样的阈值可以通过注册报告(registered reports)加以评估。注册报告指这样一类科学文章,在开展实验前,报告中的实验方法和拟议分析要先经过同行评议。

“我认为没有一个研究人员会主动说他们需要一个更严格的证据阈值,”德州农工大学的统计学家Valen Johnson提出反对意见,他是上述7月发表的文章的其中一位作者。而另一位作者、南加州大学的行为经济学家Daniel Benjamin则表示,许多科学家都倾向于宽待自己的研究。

但是Lakens认为通过研究人员提供的理由和解释,就能看清任何企图操控P值的行为。“至少所有人都认为改变0.05这未经仔细考量的数值是件好事,”他说。

美国统计协会的执行总监Ronald Wasserstein指出,为证据标准设定特定阈值“对科学无益”。去年,该协会发布了关于使用P值的明确建议,这在其177年的历史上还是第一次。

Wasserstein说他还没有加入目前关于P值阈值的争论,但是表示“我们应该接受不止存在一个‘魔法’数字”。

原始出处:

版权声明:
本网站所有内容来源注明为“梅斯医学”或“MedSci原创”的文字、图片和音视频资料,版权均属于梅斯医学所有。非经授权,任何媒体、网站或个人不得转载,授权转载时须注明来源为“梅斯医学”。其它来源的文章系转载文章,或“梅斯号”自媒体发布的文章,仅系出于传递更多信息之目的,本站仅负责审核内容合规,其内容不代表本站立场,本站不负责内容的准确性和版权。如果存在侵权、或不希望被转载的媒体或个人可与我们联系,我们将立即进行删除处理。
在此留言
评论区 (3)
#插入话题
  1. [GetPortalCommentsPageByObjectIdResponse(id=1882579, encodeId=960218825e918, content=<a href='/topic/show?id=3b2112532d8' target=_blank style='color:#2F92EE;'>#Nat#</a>, beContent=null, objectType=article, channel=null, level=null, likeNumber=32, replyNumber=0, topicName=null, topicId=null, topicList=[TopicDto(id=12532, encryptionId=3b2112532d8, topicName=Nat)], attachment=null, authenticateStatus=null, createdAvatar=, createdBy=2e6f107, createdName=liye789132251, createdTime=Sat Sep 15 23:43:00 CST 2018, time=2018-09-15, status=1, ipAttribution=), GetPortalCommentsPageByObjectIdResponse(id=1752342, encodeId=e68f1e52342d4, content=<a href='/topic/show?id=971f1493356' target=_blank style='color:#2F92EE;'>#P值阈值#</a>, beContent=null, objectType=article, channel=null, level=null, likeNumber=31, replyNumber=0, topicName=null, topicId=null, topicList=[TopicDto(id=14933, encryptionId=971f1493356, topicName=P值阈值)], attachment=null, authenticateStatus=null, createdAvatar=null, createdBy=f5cd36488669, createdName=lhlxtx, createdTime=Fri Aug 24 13:43:00 CST 2018, time=2018-08-24, status=1, ipAttribution=), GetPortalCommentsPageByObjectIdResponse(id=1553596, encodeId=16761553596e8, content=<a href='/topic/show?id=839e9e33475' target=_blank style='color:#2F92EE;'>#阈值#</a>, beContent=null, objectType=article, channel=null, level=null, likeNumber=33, replyNumber=0, topicName=null, topicId=null, topicList=[TopicDto(id=97334, encryptionId=839e9e33475, topicName=阈值)], attachment=null, authenticateStatus=null, createdAvatar=null, createdBy=2f4f14387940, createdName=qjddjq, createdTime=Tue Oct 31 23:43:00 CST 2017, time=2017-10-31, status=1, ipAttribution=)]
    2018-09-15 liye789132251
  2. [GetPortalCommentsPageByObjectIdResponse(id=1882579, encodeId=960218825e918, content=<a href='/topic/show?id=3b2112532d8' target=_blank style='color:#2F92EE;'>#Nat#</a>, beContent=null, objectType=article, channel=null, level=null, likeNumber=32, replyNumber=0, topicName=null, topicId=null, topicList=[TopicDto(id=12532, encryptionId=3b2112532d8, topicName=Nat)], attachment=null, authenticateStatus=null, createdAvatar=, createdBy=2e6f107, createdName=liye789132251, createdTime=Sat Sep 15 23:43:00 CST 2018, time=2018-09-15, status=1, ipAttribution=), GetPortalCommentsPageByObjectIdResponse(id=1752342, encodeId=e68f1e52342d4, content=<a href='/topic/show?id=971f1493356' target=_blank style='color:#2F92EE;'>#P值阈值#</a>, beContent=null, objectType=article, channel=null, level=null, likeNumber=31, replyNumber=0, topicName=null, topicId=null, topicList=[TopicDto(id=14933, encryptionId=971f1493356, topicName=P值阈值)], attachment=null, authenticateStatus=null, createdAvatar=null, createdBy=f5cd36488669, createdName=lhlxtx, createdTime=Fri Aug 24 13:43:00 CST 2018, time=2018-08-24, status=1, ipAttribution=), GetPortalCommentsPageByObjectIdResponse(id=1553596, encodeId=16761553596e8, content=<a href='/topic/show?id=839e9e33475' target=_blank style='color:#2F92EE;'>#阈值#</a>, beContent=null, objectType=article, channel=null, level=null, likeNumber=33, replyNumber=0, topicName=null, topicId=null, topicList=[TopicDto(id=97334, encryptionId=839e9e33475, topicName=阈值)], attachment=null, authenticateStatus=null, createdAvatar=null, createdBy=2f4f14387940, createdName=qjddjq, createdTime=Tue Oct 31 23:43:00 CST 2017, time=2017-10-31, status=1, ipAttribution=)]
    2018-08-24 lhlxtx
  3. [GetPortalCommentsPageByObjectIdResponse(id=1882579, encodeId=960218825e918, content=<a href='/topic/show?id=3b2112532d8' target=_blank style='color:#2F92EE;'>#Nat#</a>, beContent=null, objectType=article, channel=null, level=null, likeNumber=32, replyNumber=0, topicName=null, topicId=null, topicList=[TopicDto(id=12532, encryptionId=3b2112532d8, topicName=Nat)], attachment=null, authenticateStatus=null, createdAvatar=, createdBy=2e6f107, createdName=liye789132251, createdTime=Sat Sep 15 23:43:00 CST 2018, time=2018-09-15, status=1, ipAttribution=), GetPortalCommentsPageByObjectIdResponse(id=1752342, encodeId=e68f1e52342d4, content=<a href='/topic/show?id=971f1493356' target=_blank style='color:#2F92EE;'>#P值阈值#</a>, beContent=null, objectType=article, channel=null, level=null, likeNumber=31, replyNumber=0, topicName=null, topicId=null, topicList=[TopicDto(id=14933, encryptionId=971f1493356, topicName=P值阈值)], attachment=null, authenticateStatus=null, createdAvatar=null, createdBy=f5cd36488669, createdName=lhlxtx, createdTime=Fri Aug 24 13:43:00 CST 2018, time=2018-08-24, status=1, ipAttribution=), GetPortalCommentsPageByObjectIdResponse(id=1553596, encodeId=16761553596e8, content=<a href='/topic/show?id=839e9e33475' target=_blank style='color:#2F92EE;'>#阈值#</a>, beContent=null, objectType=article, channel=null, level=null, likeNumber=33, replyNumber=0, topicName=null, topicId=null, topicList=[TopicDto(id=97334, encryptionId=839e9e33475, topicName=阈值)], attachment=null, authenticateStatus=null, createdAvatar=null, createdBy=2f4f14387940, createdName=qjddjq, createdTime=Tue Oct 31 23:43:00 CST 2017, time=2017-10-31, status=1, ipAttribution=)]
    2017-10-31 qjddjq

相关资讯

JAMA:生物医学文献中P值的演化

研究者对P值的使用和滥用产生了广泛的辩论。为了评估在过去25年生物医学文献的摘要和全文中大规模P值的报道,并探究除P值外其他统计信息出现的频率进行了一项研究。使用自动文本采集分析了文献中P值的报道,包括12 821 790篇MEDLINE摘要和1990-2015年PubMed中心(PMC)的843884篇摘要和全文。也评估了151个英文核心期刊和PubMed分类的特定的文章类型。随机抽取1000个

科学研究中数据分析的弊病-“P-值”

世界上顶尖的统计学家们发言称:目前的科学研究中需要停止使用P-值以及显著性差异作为检验他们实验结果是否重要的依据。也许你会觉得这个说法毫无道理。什么时候研究者们会用到P-检验呢?当发现实验结果的自变量与因变量之间存在一定的相关性,为了证明该相关性是合理的或仅仅是随机误差,他们会使用P-检验。P值越低,说明他们的结果可信度越高。如果P值小于0.05,就说明两组之间存在显著性差异(statistica

美国统计协会吐槽P值滥用

P值的历史 P值得历史可以追溯到1770年,数学家拉普拉斯在处理50万左右的生育数据时,发现男性的生育率超过女性,对于这个无法解释的“超越”,他计算了一个叫做“P值”的东西,以确定这个“超越”是真实的。 很多统计学家误以为关于P值的正式文献是Fisher发表的,其实不然,最早在文献中正式阐述P值及其计算的,是统计学家Karl Pearson,你可能不了解他,但是他的Pearson卡方检验你