“显著”与“非显著”的统计概念可以通过比较“有罪”与“无罪”的法律概念进行理解。
在美国法律制度(以及世界上的大部分地区)中,在证明有罪前,会推定刑事被告无罪。如果证据证明被告有罪而无合理怀疑,则判决“有罪”。否则判决“无罪”。在一些国家,这一判决“未经证明”,这是一个更好的描述。“无罪”判决并不意味着法官或陪审团断定被告是无辜的 - 而只是意味着证据不足以说服法官或陪审团判定被告有罪。
在统计假设检验中,您从零假设开始(通常组间无区别)。如果证据产生的P值足够小,您会否决该零假设,并断定这种差值真实存在。如果P值高于您的阈值(通常为0.05),您不会否决零假设。这并不意味着证据让您相信治疗无效果,只是证据不足以让您相信有效果。