书籍：《学会提问》

推荐指数：五颗星

作者：尼尔·布朗  斯图尔特·基利

内容简介：提高论证能力，养成批判性思维，学会提问等

类型：知识应用类

时间：2022年5月18日

第8章　证据的效力：个人观察和调查研究

以个人观察作为证据可靠吗

观察者不像镜子，并不能给我们提供“纯粹”的观察。我们所“见”、所说的都是经过一系列价值观、偏见、态度、以往经历、过去接受过的训练以及期待过滤后剩下的东西。我们看到和听到的都是我们愿意看到和听到的东西，对于一次经历，我们挑选和记住的，都是和以往的经历和背景最一致的那些侧面。

有偏差的调查和问卷

首先，要让受访者对调查的回答有意义，这些回答就必须是实话实说。也就是说，口头报告必须反映心中真实的信念和态度。

其次，很多民意调查中的问题在措辞上显得模棱两可，对这样的问题可以做出多重解读。

再次，调查本身所包含的很多偏差让它们变得更加可疑。其中两个最重要的偏差是措辞偏差（biased wording）和语境偏差（biased context）。

调查和问卷数据必须不断接受检视，以确保不存在偏差。要小心查看提问问题的遣词用字！

我们是否应该将调查证据当成有效力的证据？对这个问题，人们有激烈的争论，我们的回答是“应该”，只要我们足够小心，不要在调查证据范围之外去过多概括。有些调查的声誉优于其他的调查。调查的质量越高，你就可以越放心地受它的结论影响。

以研究报告作为证据可靠吗

科学方法力求避免我们在观察世界时以及我们的直觉和常识中带有的很多内在偏见对我们获取真相造成影响。

科学研究强调可重复性、控制和精确性。

评价科学研究的一些线索

（1）报告的资料来源的质量怎么样？

（2）除了资料来源的质量以外，报告中有没有其他线索显示这项研究完成得很出色？

（3）研究实施的时间距离现在有多久，有没有理由让人相信研究发现可能会随着时间的流逝而发生改变？

（4）这项研究的发现有没有被其他研究重复过？

（5）立论者在选择研究的时候是否有选择性？

（6）有没有什么强势批判性思维的证据？

（7）有没有理由让人蓄意歪曲这项研究？

（8）研究的条件是不是人工制造的并因此遭到扭曲？

（9）根据研究样本，我们概括的范围到底有多大？

（10）研究人员所使用的调查报告、问卷调查、等级评定或其他测量结果有没有偏见或者歪曲的现象存在？

样本能够代表总体吗

抽样重要因素：

1）样本必须足够大，以支撑进行概括或得出结论。

2）对于研究者将要从中得出结论的所有事件的类型，样本必须覆盖足够的广度，或者说样本应具有足够的多样性。

3）样本的随机性越大越好。

因此，我们要对所有的研究问一问：“它们抽取的事件或人群样本有多少，样本的覆盖范围有多广，样本的随机性怎么样？”

测量方法可靠吗

在对所有研究的客观评价中，一个重要的组成部分都是判断你认为研究所使用的测量方法在多大程度上抓住了所关注概念的含义。

请经常对遇到的科学研究提出这个问题：测量方法是否让人满意？同时还要问“有没有其他方法可以用来测量这个概念，如果有，它们是否可能提供不同的结果？”

专家观点什么时候最可信

一个专家观点对你的生活中越重要，你就越要对可获得的证据做深入的研究。