如何做综述性研究-课件.ppt

1、如何进行研究综述 贾攀华 2012.10.171.参考书目：如何做综述性研究哈里斯 -库珀 著 （ Harris Cooper） 刘 洋 译2.作者简介 哈里斯-库珀，哈弗大学博士后，现为密苏里大学（哥伦比亚分校）心理学教授和社会心理学项目带头人。曾从教于科尔盖特大学（Colgate University）,是俄勒冈大学客座教授，斯坦福大学和拉塞尔-塞奇基金会的访问学者。美国心理协会和心理学会成员。同时兼任7个心理学教育的杂志的顾问编辑。也是美国心理学会雷蒙德B-卡特尔职业项目研究奖的首位获得者，并荣获美国心理学会（AERA）解释学奖金。3.进行文献综述的必要性及意义必要性：随着电子计算机和在

2、线网络搜索文献技术的应用，研究者获得社会科学信息的能力发生了变化。 社会科学内部日益增长的专业化水平的逐步提高，研究者对已有的、大量真实可信的研究综述的需求也日益增多。意 义：避免重复前人在研究中所犯的错误。 综合、全面的了解和分析所要研究的内容。 为他人的研究综述提供参考。4.四个例子（1）家庭作业对学习成绩的影响已有的家庭作业的研究总结（不确定）： 提高学习成绩学生做家庭作业 不提高学习成绩（2）实验室试验中人际期望效应的人格调和研究结果显示：受试者想要获得更多成功的期望是影响他们心理认同的主要因素。（3）酒精对人类攻击性的影响（4）对待强奸态度的个体差异5.文献综述的定义相近术语：文献综

3、述、文献述评、综合性研究述评、研究综述以及元分析。（这些术语有的内涵宽泛有的内涵狭窄，它们中的一些在实际中可以交换使用。）文献综述是外延较为宽泛的术语，一般是以较为详细的独立研究工作，或是以新的对原始数据研究报告简介的形式出现，当文献综述作为独立的新数据出现时有许多不同的焦点、目标、视角、写作策略、组织结构和阅读者。两种不同的综述类型科学文献中最常出现的是合并两个特殊焦点和目标的文献综述。第一种文献综述被称为研究综述、综合性研究综述或研究述评。这类研究的研究者希望通过从已有的独立研究中推导出来描述相关或相同假设的整体结论，寻求总结以往的研究成果。第二种类型的文献综述是理论综述，综述者用给定的理

4、论解释一种特定的现象，并比较它们在、内在一致性及预测实质。6.研究综述的阶段问题形成阶段文献检索阶段数据评估阶段分析解释阶段公开发表阶段6.1问题形成阶段6.1.1原始研究和综述性研究中变量定义的异同同：需要给出变量的概念定义。概念定义的广度不同，包含的范围不同。如“成绩”的概念可以界定为“某人在学术领域的知识水平”也可以界定为“通过努力取得的东西”。 需要确定所研究问题变量的适用范围。 需要确定一个事件如何代表了一个感兴趣的变量。异：原始研究者在研究开始前必须从操作层面界定概念。如，攻击性的原始研究者必须确定如何衡量攻击性。 综述者最初不必清楚的界定概念。对他们而言有一个概念定义和一些已知操

5、作就可以进行文献检索。 原始研究仅包括一类（有时是两类）的操作定义。 综述研究通常包括很多经验认识。 6.1.2研究综述的多重操作（1）概念和操作之间的“一致性”用多重广义的方法界定狭义的概念。用广义的概念进行狭窄的操作。（2）多重操作与概念到操作之间的对应性多重操作：应用两种或两种以上的方法对同一对象进行的分析，“但在非相关部分存在不同的形式”。多重操作主意产生了积极的后果。（一旦经两个或两个以上的独立测量过程确认了一种论点，不确定性的解释就会大大减少。）例：实验者不知道不知道受试者饮料中是否含有酒精及酒精的类型实验者知道知道试者饮料中含有酒精 后者结果显示实验者高估了酒精的作用，混淆了酒精

6、效应同实验者的期望效应。（3）用新概念代替旧概念（4）使用与概念相关的非初始操作文献检索发现的研究被圈入一种概念框架内，这种研究不同于综述这的研究，但综述者想到的与概念相关的测量和操作。（5）多重操作对综述结果的影响操作定义里的差异：关于同一主题的两个研究综述使用的操作定义彼此是不同的。操作细节里的差异：综述者关注方法论特征的变化，多重操作会影响研究结果。例：“人格” 概念宽泛 “对待强奸的态度”概念狭窄将“强奸”界定为“未经女方同意发生的男女之间的性交”。经搜索发现了17对强奸态度的不同测量，其中使用平率较高的有5个。但在如何界定强奸态度时，这些测量又有所不同。6.1.3判断研究的概念相关性

7、综述者应尽量使用最广义的概念定义进行文献检索。如果决定将“概念的可接受性”包括在广泛的概念里综述者应尽可能地保持思想开明。例： 家庭作业效应的综述是否包括某种类型的操作。为了克服客户的恐惧，行为治疗师会为他们布置“家庭作业”或者练习。这种类型的“家庭作业”包含在广义的概念里，而不同于我们所要研究的家庭作业。我们把“家庭作业”界定为“学校老师给学生布置的要在课后完成的任务”。6.1.4以往综述的作用（1）通过对以往综述的分析可以知道该领域中其他学者的态度观点。（2）通过对以往综述的分析可以评估较早研究的可靠性和有效性。（3）通过以往的综述编纂与新综述相关的参考书目。6.1.5研究综述编码单编码单

8、应包含的信息：鉴定报告 与研究报告相关的背景特征方面的信息，主要包括作者、来 源、发表时间和发现报告的信息渠道。研究设置 研究的地理位置（国家或国家的某一地区，城市、郊区、农村），不同的体制环境（如分别在大学和监狱里对强奸态度进行研究），更细微的研究机构（公立学校私立学校）。研究主题研究方法对待方式 综述者需要仔细描述操作或独立变量测量的细节问题。统计结果或效应量编码过程 6.1.6问题形成阶段的效度问题（1）影响研究综述效度最核心的两个问题：变量定义里概念的广度，同使用的狭义定义相比综述中使用的概念定义范围越广，就有可能得到一般性的结论。研究中搜索基本关系调节量使用的操作细节，如果综述者对研

9、究操作细节的介绍过于粗略，他们的结论很可能会掩饰研究结果的重要特征。（2）保护效度研究者在检索文献时，尽可能的使用最广义的概念定义展开搜索。注意研究特征间的区别。在初步分析中，对有关不同的研究结构和研究特征提出的建议应进行仔细的分析。6.2文献检索阶段6.2.1原始研究和综述性研究的异同同：都包括特定的目标群体和抽样范围以及它们之间的差异。抽样要尽可能的代表目标群体。异：综述研究者希望自己的工作能够涵盖“以前所有的研究”。希望他们得出的研究结果适用于对某一主题感兴趣的目标人群。原始研究使用的抽样范围比一般的对象要求更加严格和具有代表性。希望尽量的减少研究结果和调查对象的实际可靠性。6.2.2文

10、献检索的方法（1）非正式渠道：个人联系、恳请信件、传统无形学院、电子无形学院和万维网（2）正式渠道：专业会议论文报告、个人期刊库、电子期刊和研究报告参考目录。（3）辅助渠道：研究参考书目、政府文件、前瞻性研究记录册（4）使用参考数据库检索心理学文摘数据库PsycINFO教育资源信息中心ERIC国际学位论文摘要社会科学引文引索SSCI 在检索的过程中要确定检索的充分性，搜索者尽可能的使用多种渠道收集研究综述所需要的信息。6.2.3文献检索的效度问题（1）文献检索中的效度威胁综述中可能并未囊括所有与该主题相关的研究。检索中的个体或群体并不能代表目标群体中所有的个体或要求。（2）效度保护尽可能的全面

11、广泛的搜索文献。详细的介绍综述者的研究过程，包括参考数据库里搜索的信息是哪一年的，采用的检索词是什么。如果索引是有效的，综述者应该介绍可能出现的检索偏误。研究综述者应该总结在个别研究中使用的个体样本特征。6.3数据评估阶段6.3.1原始研究和综述性研究的异同同：都是通过分析取得数据，找到了极值记录的误差或建议的不可靠测量的其他指标。对单个数据点进行分析观察其是否为统计离群点。异：识别不可靠数据的方法不同。原始研究中参与者的回答被舍弃是 因为研究者有证据该参与者的反应是不适当的，或者他误解了回答的指令要求。在综述中，除了记录误差外，研究方法的效度是决定某一数据是否被使用的标准。6.3.2综述者的

12、倾向在研究开始以前，原始研究者和综述研究者都对研究有所期望。综述者更倾向于选择那些与自己预测结果相同的研究。在原始研究中，通过构建精巧的控制系统，方法论家可以减少由于实验者期望效应中的“人为因素”给研究结果带来的影响。在综述研究中防止出现期望偏差收效甚微，综述者对研究结果和研究资料的搜集评估十分谨慎。6.3.3分类研究方法的途径（1）效度威胁的途径，在一系列和研究设计相关的外在影响因素中，能够发现“可能产生了与实验促进因素相混淆的效应”。不同的研究设计有不同的“效度威胁”，这些研究设计依据推理能力而加以对比。不太理想的研究设计可以通过“三角测量”方法从多重研究中得到较强的推论。（2）方法描述途

13、径，和编码单相联系。（3）混合标准途径，将上述两者混合使用的后验方法。例：关于家庭作业效果的综述包括了三个编码：实验设计的类型（随机分配或非等价控制组）；处理是否平衡；实验者是否是班级教师。这三个编码与内部效度相关。其他的编码与研究的构思效度、外部效度和统计效度相关。 家庭作业研究的编码者没有对涉及方法或方法的效度进行推论，只是简单的搜集了原始研究者报告中的信息。使用随机分配、平衡处理、研究者不完全是家庭教师的研究更好一些。低于理想状态的研究也包括在综述中。同时，设计因素也会对研究长生影响，只有在设计和结果之间发现了重要关系之间的差异，研究结果的加权才是相对可信的。6.3.4数据检索的问题（1

14、）图书馆检索的问题：找不到相关的文件。通过馆际互借、直接联系等方式查找。（2）不完整和错误的研究报告：查找到的文献并没有所需要的信息。或者是研究中缺少了一些关键的信息。当研究结果非显著时，可以向研究者所要信息。把比较当做尚未检验的无效结果处理。在元分析中排除比较。（3）编码研究结果的不可靠性：编码错误，记录错误和原始研究者描述不清。编码者在编码前制定出要讨论的内容和实际案例。获得可靠的数值。 例：人际期望效应中人格调和的研究综述中最大的难题是缺失数据。相关的系数通常被报告为不显著，相关关系量也没有明确的给出。确定一篇发表论文是否是一篇学位论文报告是弥补缺失数据的办法。如果是，就可以得到完整的学

15、位论文，这些论文通常包括对数据结果更完整的描述。6.3.5确认独立比较实验室作为单位研究作为单位样本作为单位比较作为单位转换分析单位比较调整6.3.6评估研究的效度问题效度问题：（1）除了方法论质量标准外，用任何一种评估标准来排除或评估研究都会对综述结果的效度造成威胁。（2）原始研究者提供的不完整报告会危及综述的效度。（3）综述者对适用于独立数据的单位计算错误，综述结果值得怀疑。保护效度：（1）综述者应尽最大的努力确保存在一些预先的、概念的和方法论的判断。这些判断会影响综述（而非总数结果）里包含或排除的研究的结论。如果研究的是不同加权，那么加权方案必须明确、合理。（2）研究方法的途径应当尽可能

16、地像许多研究设计的特征一样全面、详尽。（3）当综述者找到不完整或有误差的报告时，需要说明清楚应该使用什么样的惯例。（4）使用训练方法和评估方法以减少研究中不可靠的信息检索。（5）在分析单位的选择上，应建立统计考虑和正在研究的具体问题的属性的基础上。6.4数据分析阶段6.4.1数据分析的方法：（1）元分析不做元分析的情况：定量研究方法进适用于研究综述而不适用于有其他重点或目标的综述。在研究综述中采用统计数据的基本前提是：一系列的研究都服务于同一概念假设。 例： 酒精与无处理控制的比较酒精与攻击性的综述 酒精与安慰剂控制的比较二者都比较评估了酒精的影响，如果合在一起使用，无法提供有益的信息。当假设

17、里包括了控制比较时，对控制类型的区分是很重要的。（2）主效应和交互作用分析主效应检验中的变异性，来源于抽样误差和加感兴趣。例：假定：a.测量每个美国学生的学习成绩是可能的 b.进行测量后发现做家庭作业的学生和不做家庭作业的学生 的学习成绩正好相等，即两个总体中组均值正好相等。抽取一个容量为1000份的样本，其中包括50个做家庭作业的学生，50个不做家庭作业的学生。经过研究发现，只有少些样本能得出相等的组均值。结论：样本估计得来的均值与真实的总体值之间会有些出入。交互作用检验中的变异性元分析中的交互作用（3）合并独立研究结果显著水平的方法： 计票法、合并显著性水平、失效安全系数（4）测量关系强度

18、： d指数、r指数、比值比（5）合并研究中的效应量： d指数、r指数（6）分析研究结果中的效应量方差： 传统的推论统计、比较观察方差和期望方差、同质性分析、复杂的系数分析、效应量中的方差6.4.2数据分析的效度问题效度问题：（1）综述者采用的推论规则不恰当。（2）综述产生的证据可能被误解为支持声明的因果关系。效度保护：（1）在传递结论和推论规则的信息时，应尽可能的明确指导假设。（2）如果任何证据显示了解释规则对效度的影响，这条证据应该被描述出来。（3）只要有可能，综述者应该使用需要不同假设的多重方法来分析数据。（4）综述者应仔细区分研究产生的证据和综述产生的证据。6.5解释和呈现阶段6.5.1

19、研究综述报告格式介绍部分：包括对研究问题概念上的阐述和对问题重要性的陈述。在这部分综述要试着概略描述所要研究的问题，包括理论、实践和方法历史。以及以前所做综述的观点、存在的争议以及遗留下尚未解决的问题，并指明新综述应关注的方面。方法部分：文献检索的细节、选用研究的标准、原始研究中使用的方法、独立调查结果的确定、研究编码的细节、统计程序和惯例。结果部分：描述性统计、计票与合并显著性水平、总体效应量分析效应量的影响、交互作用描述讨论部分：描述综述中总结的主要结果、重要效应量的大小及其意义、分析同预测相关的结论和其他事先断言的关系的结论、对研究结果进行一般性的评估讨论、对以后研究中需要分析的主体进行讨论。6.5.2撰写报告的效度问题（1）在综述研究过程中对细节问题描述的缺失。（2）其他调查者认为是比较重要的关系调节量的证据缺失。效度保护：认真考虑如何表更为详尽的、能够是读者清晰易懂的报告。7.总结效度问题可行性和成本科学方法和不一致性综述研究的创新性