为了对“出版或灭亡”的总体统治力做出贡献,我们希望我们的研究结果无论是什么,都应该是积极而有意义的。 有很多方法可以提高获得重大成果的可能性,因此可以在知名杂志上发表,即我们的下一份薪水! 在下文中,我将举例说明伪装技术,以帮助沮丧的研究人员在有关早晨咖啡是否提高生产率的研究问题上获得未来15分钟的成名(不是一种选择)。 换句话说,我们想通过在设计和研究中滥用我们的自由度来产生误报(所谓的“ p-hacking”; Simmons等,2011)。

第一步是不预先注册研究。 在跳过此步骤时,我们为试图复制或理解我们的研究方法和思想的科学家和非科学家搭建了一堵墙。 第一步完成后,我们可以打开我们的秘密实验室的大门,从真正的工作开始:主观性。 在考虑“早上喝咖啡能提高生产率”这样的研究问题时,保持尽可能模糊和主观的观点很重要。 生产率可以通过多种方式定义和衡量,“早晨咖啡”并不意味着咖啡的含量或咖啡因含量。 通过测量咖啡因含量,咖啡投入时间,一天中的咖啡量,咖啡的品牌,酿造方法等指标,我们为选择“正确的” IV奠定了坚实的基础。 此过程也适用于我们的DV,即生产率。 生产率可以衡量为在一小时,一天,一周或一个月内完成的工作量,但也可以通过计算上厕所时间或与同事的社交互动来衡量。 除了IV和DV,我们还可以包括或不包括协变量,这取决于它们是否加强了我们的假定联系。 使用协变量的随机性和灵活性也是很多研究中很少解释的一点,因此加剧了可怕的不透明性。 这种分析因变量的灵活性几乎使我们发现假阳性结果的机会翻了一番(Simmons等,2011)。

当我们决定使用两组实验设计时,我们可以调整结果,要么在支持我们假设的不同条件下进行大量实验,要么仅重复一次实验,直到获得一个重要的结果。 多亏了我们朋友的alpha等级,我们也可以自由决定它的水平,但是出于信任的考虑,我们应该使用常见的alpha等级α= .05,我们只需要重复进行至少20次实验。 这是由于给定的概率错误地拒绝了5%的原假设。 因此,即使变量之间的联系并不重要,我们仍然有很小的机会产生显着的结果。
如果我们不想做这项工作,我们也可以将“错误”的假设变为适合我们的第一轮实验的假设。 这种方法称为HARKing(Kerr,1998),也不应报告。 一个优秀而强大的HARKer也应该始终对“研究者”保持警惕,以试图复制他的研究并否定一个真实的假设。 因此,有必要删除先前假设的证据,仅报告“数据后假设”。 即使许多文献都将“养育行为”视为对良好科学的威胁(Kerr,1998年),但并没有禁止它,也不在出版规则之内。

最后但并非最不重要的一点是,我们也可以在实现意义的过程中对数据进行p-hack。 例如,这可以通过删除异常值或创建组或子组(低咖啡因,中咖啡因,高咖啡因)来完成。 说到群体,样本量的创建和定义也是以任何可能的方式支持您的假设的好方法。 首先,只要没有明显的影响,我们就应该增加研究对象。 这种方法以50%的比率增加了我们发现(假)阳性结果的机会(Simmons等,2011)。 此外,选择大样本量会严重危及找到假阳性结果的机会(Simmons等,2011)。
通过这篇文章,我很高兴为一个更好(更真实!)的世界做出贡献,并希望鼓励科学家以一种轻松且可复制的(痛苦,愚蠢的话)无痛的方式去做自己喜欢的事情。 疼痛被认为是不好的,一点真理不会伤害任何人,对吗? 接下来的文章将被命名为“ 改变变化-如何通过三个简单的步骤来改变气候 ”,“将我的缩写还给我-个人设备上的个人陈述 ”和“ 成就感-如何使更多钱比科学要多 。 他们都是真实的,相信我。

荷兰科尔(1998)。 混料:已知结果后进行假想。 人格与社会心理学评论 ,第2期 ,196-217。
西蒙斯(JP),尼尔森(LD)和西蒙索恩(U)(2011)。 假阳性心理学:数据收集和分析中未公开的灵活性允许呈现任何有意义的东西。 心理科学 , 22卷 ,1359–1366。