不少人对显著性检验存在误解，误认为经过显著性检验后其科学性就得到了保证，自己的观点就万无一失了。但事实上并非如此。近年来，人们对心理学研究中的显著性检验有诸多争议，COHEN在其著名的《地球是圆的(P＜.05)》[5]一文中对此进行了列举。有鉴于此，美国心理学会统计推断特别工作小组发表了《心理学杂志中的统计方法——指导方针及其解释》[6]一文，以期引起人们对于显著性检验的思考。流行于研究者间的一句格言是“重复一次抵得上一千次T检验”，这句格言的要旨是许多研究者都相信实验验证要好于应用于初次实验结果的推断统计，这是非常有道理的。
2.4 夸大的统计图
统计作为一种工具，往往为受到使用者本人主观意愿的制约。有人曾感叹统计学家会说话。确实，人们在统计指标的选择、统计图表的制作、统计方法的选用上都可能会带有自己的个人目的，具有一定的功利性。这一点可以从下面的例子中可见一斑。有一所高校近3年内因心理问题而被迫中断学业的人数从13增加到17、20人，学校的心理咨询中心为了呼吁人们对大学生心理健康问题的重视，因而想让人们知道该校学生的心理问题正变得越来越严重，单单因心理问题而中断学业的人数就在不断增加，所以他们以年份为横坐标，以心理问题而中断学业的人数为纵坐标绘制了一张统计图，通过把Y轴的标尺拉得很短，使学校心理问题而中断学业的人数的增加看上去很突出。而学校当局则往往不愿意这样来宣传自己的学校，于是根据同样的数据可以绘制了另外一张统计图，他们通过把Y轴的标尺拉得很长，给人以学校因心理问题而中断学业的人数相当稳定的感觉。两张图显示的结果都是正确的，但要说明的问题却大相径庭。无怪乎人们把统计与谎言并列。而这种被夸大的统计图在心理学研究中相当常见。因此，我们在读图时，必须仔细看清图中的标尺。此外更重要的是要确定差异在统计学上是否可靠，而是不挖空心思地使差异在图中显得足够“大”。
2.5 相关分析的误用
观看暴力性电视节目会导致儿童的攻击性行为吗？有人曾研究了三年级的儿童，对他们对暴力电视的爱好及其同伴评价的攻击性进行测量，发现上述两个变量之间确实存在着中等程度的正相关(R= 0.21)，那么我们该如何解释这一相关系数呢？可以这么说：这表明了攻击性强的儿童倾向于观看更多的暴力性电视节目。但我们还能进一步说正是因为观看暴力性电视节目才导致了儿童的攻击性行为吗？这涉及到对相关分析这一统计方法的理解问题。事实上，仅仅根据一个相关系数，我们无法确定事物之间的因果关系，单一的相关证据并不能作出有效的因果陈述。在本例中，我们可以把因果陈述颠倒过来：即儿童的攻击性行为导致了他们对暴力电视的爱好，也有可能有第3个变量，比如说家庭环境，才导致了儿童的攻击性行为与对暴力电视的爱好。相关分析一般只用于分析两个变量间的关联程度，要说明蕴含在相关背后的、对这种相关加以解释的本质则要借助于理论。或进一步对一些变量进行控制后作深入的研究，也可以对相关研究进行改进，如作交叉－滞后－组相关程序的研究（一种追踪研究，可以得出因素间的交叉－滞后相关），经过多重检验来提高相关研究的解释力。