就是在写论文的时候经常会遇到p大于0.05的情况,我一般就老老实实的说那个变量不显著。但是前几天看到别人的论文里面直接就使用0.1的p值了,并且也没有说明理由。教材里的p值也说是0.01、0.05和0.1都可以选,但好像0.05是最常用的,好像也是fisher在女士品茶实验里用的值,也就有点刻板印象,不知道如何变通了。所以想请教一下各位前辈,谢谢啦。

    直接报告p值,然后再谈在xx显著性水平下是不是显著,同时不要迷信这个是不是显著的结果。

    magiskxzy 我个人的观点是,一般显著性水平是0.05,没有特别的理由是没必要变化的,而且要在看到结果之前就确定下来。但是不显著的结果,不代表没有意义。如果我们把P值看做一种信心,那么0.05-0.1之间的结果虽然不显著,但是好像值得看一看,如果从其他方面的证据看来这个结果是非常有意义的,我觉得是有必要highlight的(虽然不能说是显著的)。

    我以前曾想办个刊物就叫 Journal of Insignificance 专门发表不显著的结果。刚放狗搜了一下,还真有人这么干:https://www.jasnh.com


    这里有一篇古早文章讲这个 0.05 的来历。

    It turns out that Francis Edgeworth, who introduced "significant" in statistics, and Karl Pearson, who popularized it in statistics, used it differently than we do. For Edgeworth and Pearson, "being significant" meant "signifying". An observed difference was significant if it signified a real difference, and you needed a very small p-value to be sure of this. A p-value of 5% meant that the observed difference might be significant, not that it definitely was.

    我的理解是,小的 P 值只是故事的开始(即“这里也许有值得深入研究的东西哦”),而常见的误解是它是故事的结束(即“终于实锤了、可以发表、走人了”)。此刻我的脑洞里回响起契诃夫的一篇短篇小说《遛小狗的女人》的结尾:

    似乎片刻之后,答案就能找到,到那时候,就会开始一种崭新的、美好的生活,不过两个人心里都明白:离终点还十分遥远,最复杂、最坎坷的道路现在刚刚开始。