统计学中的“显著”与“不显著”的概念,可以通过与法律中的“有罪”与“无罪”概念进行类比来理解。
在美国的法律体系(以及世界许多地方)中,刑事被告在被证明有罪之前均被推定为无罪。如果证据足以在排除合理怀疑的情况下证明被告有罪,判决结果即为“有罪”。否则,判决结果即为“无罪”。在某些国家,判决结果为“未被证明”,这种表述更为准确。 “无罪”判决并不意味着法官或陪审团认定被告是无辜的 - 它仅仅意味着证据不足以说服法官或陪审团认定被告有罪。
在统计假设检验中,您从零假设开始(通常是各组之间没有差异)。 如果证据得出的P值足够小,您就拒绝该零假设,并得出结论认为差异是真实存在的。如果P值高于您的阈值(通常为0.05),您就不会拒绝零假设。这并不意味着证据让您确信该治疗没有效果,仅仅是证据不够有说服力,无法让您确信存在效果。