1、心理学研究方法:从选题到论文发表 日 期:主讲人:第四章 完成研究过程1.博学:选择研究类型2.明辨:确定取样方法3.慎思:确保信度效度4.笃行:收集研究数据目录博学:选择研究类型非实验研究:描述研究、历史研究、相关研究、质性研究实验研究:真实验研究、准实验研究心理学研究类型及其特点概览一、非实验研究5描述变量之间的关系不能描述或检验变量之间的关系 描述研究 历史研究 相关研究非实验研究目的与实验研究区别分类6(一)描述研究 目的 描述在研究时段内时间的当前状态 与实验研究区别 不设置处理组与控制组 无须检验任何变量对其他变量产生的影响 例子 中国社会科学院中国社会心态研究报告 皮亚杰儿童行为
2、观察 意义 可作为深入进行更复杂研究的第一步7(二)历史研究 目的 呈现过去的一幅画卷 具体做法 将历史资料(如原始文物、文件资料、访谈及口头故事等)加以整合,形成一个连贯的“信息体”,从而为过去或现在发生的一些问题提供某种可能的解释。例子 美国历史上42位总统在职时的表现与专家对其自恋评分间的关系Watts et al.,20138(三)相关研究 目的 探究变量或事件之间的关系两个或多个事件如何与其他事件联系因素之间有什么共同特点一个或多个信息在多大程度上能预测一个特定的结果 例子初中生学生投入的发展特点及其与同伴欺负的关系:一项三年追踪研究 类型横断设计连续独立样本纵向设计郑巧,耿丽娜,骆
3、方,李凌艳,心理发展与教育,20209(三)相关研究 横断设计 同一时间抽取一个或多个样本 描述总体的特征,或两个或多个样本之间的差异 连续独立样本设计 连续一段时间内开展一系列横断研究 例如:我国大学生的自尊水平随时间的变化趋势 纵向设计 在一段时间内调查相同的对象 优势:确定调查对象态度或行为变化的方向和程度;有利于评估人们的态度或行为在某些情境前后的变化 缺点:1.难以避免样本流失;2.反应间一致性;3.依然是相关关系沙晶莹,张向葵,2016Orth,Robins,&Widaman,2012相关关系 vs 因果关系10相关关系两个变量之间存在相应变化的关系,表述为:“A越B越”方向性问题
4、 第三变量问题因果关系相关关系 vs 因果关系一个变量的变化会引起或引发另一个变量的变化,表述为:“A的变化引起B的变化。”需要满足三个条件自变量可以操纵时间先后控制严格相关研究中的因果可能性1112(四)质性研究 应用访谈、综述、个案研究和其他相关探索技术探究导致人们行为某些过程的社会行为科学研究 定性数据;不能直接检验因果关系 例如:研究型大学教师教学能力结构体系(许迈进,章瑚维,2014)二、实验研究13准实验研究真实验研究14(一)真实验研究 特点 随机选择被试、随机分配被试入组 类型 被试间设计 2(权力感:高/低)2(产品类型:实用品/享乐品)被试内设计 2(权力:高/低)41(分
5、配比例:0:4040:0)优点:需要较少的被试;控制被试差异 缺点:顺序效应、练习效应、疲劳效应 混合实验设计孙倩,龙长权,王修欣,刘永芳,201915(二)准实验研究 特点 群体/处理预分组 社会阶层、校园霸凌的次数、家庭虐待的经历 解释力不如真实验设计 例子 拖延行为的干预(林琳,2017)原因 伦理考虑 童年期受虐经历如何影响成年人的健康16三、做出你的设计何时采用何种研究方法?选择合适的研究方法 研究目的 研究问题的类型 整合不同的方法 研究伦理 研究者特长 经济成本和时间成本明辨:确定取样方法什么是取样概率取样与非概率取样比较如何选择适合的取样方法估计样本量大数据给研究中的取样带来的
6、机遇和挑战18什么是取样 取样是指从研究总体(指潜在的参与者)的所有单位中抽取部分单位作为样本(总体的一个子集)。取样的目标就是尽可能减少取样误差(样本特征和总体特征之间的差异)。概率取样(随机取样)是指随机选择样本,使研究者能够评估样本所得结果与总体间的区别,是一种获得代表性样本的选择方法。简单随机取样 系统取样 分层取样。非概率取样(非随机取样)则因为一些限制,无法保证总体中的每个单位都有同等被抽取的机会,也无法评估每个单位进入样本的概率。方便取样 定额取样。19概率取样与非概率取样比较20结合总体区分度考虑样本类型和规模结合研究变量和群组数量确定样本规模结合研究经费考虑样本类型和规模结合
7、研究类型确定样本类型和规模结合研究工具特点确定样本规模选择适合的取样方法21估计样本量 样本量与总体大小无关,而与研究对象的变异大小、置信程度,以及允许的误差大小有关,样本量在不同统计方法中可以估算出来以满足能达到统计显著性的基本要求。样本量过小会失去代表性,而过大的样本除了增加取样的成本和难度之外,并没有增加检验的准确性。22根据研究预期的效应量、和估算出合适的样本量 效应量(effect size):用以衡量自变量和因变量之间关联强度的指标,是虚无假设H0错误的程度,且几乎不受样本量的影响。区分统计显著性与实际显著性;通过元分析方法累计或比较以往研究结果。郑昊敏,温忠麟,吴艳,201123
8、根据研究预期的效应量、和估算出合适的样本量 检验力(power):用表示,是正确拒绝虚无假设的概率,也是检验出一个真实存在的效应的概率。检验力会受到效应量、样本量、的影响。效应量大,大,样本量大,则检验力也大。接受 拒绝 为真 正确决策,I 型错误 为假 II 型错误 正确决策,统计检验力假设检验的两类错误110H0H0H0H210:H虚无假设虚无假设:211:H备择假设备择假设:在其他条件不变的前提下在其他条件不变的前提下和不可以同时增大或减小和不可以同时增大或减小25采用G*Power估算样本量 第一步:选择统计方法:t检验,F检验,Z检验,X2检验 第二步:选择分类方法 第三步:确定想得
9、到的参数 Effect size:0.2,0.5,0.8(小,中,大):一般0.05,0.01也可 Power:0.8以上 其它可选参数26大数据给研究中的取样带来的机遇和挑战1.采用大数据技术的研究不对总体进行样本抽取,而是对总体所有数据进行分析处理,保证了分析结果的可靠性。2.借助大数据,心理学能够在很大程度上摆脱对实体实验室的依赖,最大限度地扩充研究对象,使研究不再只局限于实验室小样本或问卷调查采集的随机样本。3.大数据能够避免社会期许效应,最大限度规避研究对象在测试过程中受到的各种干扰。数据中包含很多研究不需要的噪声,需要研究者掌握良好的数据处理技术,和对研究问题的分析推断能力。慎思:
10、确保信度效度研而有信信度研而有效效度28一、研而有信信度 信度:值得信赖的程度 研究结论的可靠性 前后一致性 随机误差 vs 系统误差 随机误差:与实验无关的变量等偶然因素引起的无规律误差 被试不同的参与动机;不同主试性格不同 影响实验可靠性&准确性 系统误差:常常有某种特点,显示出恒定的规律 量表条目表述不清;前测对后测的影响 影响实验准确性29(一)信度与误差 误差产生的来源1.实验中对变量的测量 题目的表述,问卷过难或过易2.实验进行的环境与认为因素 环境温度,主试主观表现3.被试本身的一些因素 被试的心理状况,如焦虑水平 检验测量工具可靠性的指标,根据误差来源进行分类:1.重测信度 同
11、一量表、同一群体 不同时间:间隔时间根据测验目的、性质及受测者特点来定,2-4周为宜,最长一般不超六个月2.复本信度 衡量两个测验是否等价,避免记忆与学习带来的影响 形成两个等价的复本比较困难3.内部一致性信度 反映量表内部题目间关系,测量相同内容或特质的程度分半信度同质性信度4.评分者信度 不同评分者在测验结果计分上的一致性30(二)信度的类型31重测信度与复本信度32(三)信度的测量 相关:相关系数r-1,133(四)提高信度的方法1.样本量 适当增加被试人数 增加量表条目2.研究工具的可靠性 信度至少达到0.6;0.8以上比较理想3.被试因素 身心状况4.研究设计因素5.研究实施过程因素
12、34二、研而有效效度(一)效度定义 实验方法能达到实验目的的程度。两个重要特性:相对性 连续性35(二)效度的类型及其影响因素1.内部效度 自变量与因变量之间的因果关系的明确程度 影响内部效度的因素 参与者的成长与成熟 参与者的选择与流失 情境性因素 前测的影响 实验过程与实验者的影响 统计回归效应36(二)效度的类型及其影响因素2.外部效度:实验结果能普遍推论到样本的总体和其他同类现象中去的程度,即结论的普遍代表性与适用性。1.从特定群体向总体推广1.以大学生为被试2.采用自愿参与者3.采用互联网被试4.采用居住在特定地区的被试2.向其他文化推广3.向其他实验者推广4.向自然情境中推广1.现
13、场观察研究2.现场调查研究3.现场实验研究5.按统计交互作用来推广37内部效度 vs 外部效度 如果研究者对确认变量间存在的因果关系(即内部效度)感兴趣,那么他可以对自变量进行操纵,且将其他变量保持恒定。如果研究者对研究结果的可推广性(即外部效度)感兴趣,那么,他可以采用尽可能多类型的样本或实验情境进行研究。提高内部效度的方法(如对实验环境的控制)可能会降低外部效度;而提高外部效度的方法(如对真实生活情境的模拟)可能会降低内部效度。采用虚拟现实平衡技术,尽量使研究情境接近人的真实生活情境,从而较好地兼顾研究的内部效度和外部效度。内部效度外部效度向自然情境推广向其他文化推广向其他参与者推广控制无
14、关变量控制环境变量38(二)效度的类型及其影响因素3.构念效度 理论构思的合理性及其转化为抽象与操作性定义的恰当程度 分类 表面效度 内容效度 预测效度 同时效度 聚合效度与区分效度39三、信度与效度的关系信度是效度的必要条件,但不是充分条件信度是为效度服务的,因而效度是信度的目的笃行:收集研究数据数据收集前数据收集中数据收集后41一、数据收集前(一)被试招募1.被试数量2.被试的人口学信息3.如何吸引被试参加实验?42(二)数据收集表的制作 Qualtrics 问卷星 E-prime MATLAB43(三)合理安排实验时间 制定详细的日程安排表 提前预约实验室 预留更多时间做实验44(四)考
15、虑进行预实验 先招少量被试演习实验;实验结束详细询问体验 优点:正式实验材料评定 发现实验设计漏洞 初步考察实验结果45二、数据收集中(一)操纵自变量1.操纵的类型 直接操纵 间接操纵 事件操纵2.操纵的强度 在研究的早期阶段,为加大自变量对因变量的效应,应尽量加大操纵强度,放大组与组之间在自变量上的差异 在确定自变量确实有效后,可以进一步增多自变量的水平数 避免天花板效应与地板效应3.操纵检验4.操纵成本46(二)测量因变量1.测量类型 自我报告 行为数据 生理数据 包含多个因变量、使用多种测量方法对同一心理过程进行测量2.测量的灵敏度 灵敏度指测验组间差异的灵活与敏感程度 反应时正确率;生
16、理行为47(三)控制无关变量实验室环境1.实验室环境 需要保持实验环境的相对恒定。注意控制实验室的光照、背景噪声、温度、布置等。一些实验如视觉、听觉实验更是需要对实验室环境进行严格控制。48(三)控制无关变量主试1.主试指导语 简明扼要:避免太长的指导语给被试造成记忆上的负担。表意清晰:避免让不同的被试产生不同的理解。简单通俗:避免使用专业词汇造成被试理解的困难。规范标准:如主试在讲解指导语时控制好情绪、态度、语气等,或用计算机给所有被试呈现相同的指导语。2.降低实验者效应 严格培训:实验前对参与的主试进行系统严格的培训。提醒注意:主试注意控制自己的情绪、态度、语言、行为等。减少接触:尽可能减
17、少主试与被试的接触(如通过计算机控制整个实验)。双盲控制:主试和被试都不知道实验目的。随机分配:避免特定的主试和特定的被试相互熟悉从而产生实验者效应。49(三)控制无关变量被试 被试的实验动机、兴趣、态度、情绪状态、身心状况、练习效应、是否知道实验意图等都会产生无关变量。被试类型应对策略合作型被试:一旦知道或猜到实验意图,就尽量让自己的反应符合实验意图。使用合理的欺骗,让被试以为在做一件事情,事实上是在做另外一件事情,也可以通过设置填充项目来隐藏因变量。防御型被试:对实验目的有较强的防御心理,小心谨慎。尽量打消他们的担忧和顾虑。同时,尽量避免招募不合作型被试,如果遇到这种被试,实验数据需要剔除
18、。不合作型被试:不按要求进行实验。尽量避免选择有一定心理学知识背景的被试。实验完成后也可以测量被试是否了解研究的意图,对于猜到实验意图被试的数据要进行单独分析。50(三)控制无关变量安慰剂效应1.安慰剂效应 明知是安慰剂,也一样有效 有些人更容易受安慰剂效应的影响 干预组设计难以完全排除安慰剂效应。建议正式干预前测量被试期待并采取措施。51(四)其他需要注意的事项 实验细节 给被试做编号,方式混淆 如遇特殊情况,做好记录 在运行程序前,注意编号 程序出现故障,友好协商 避免被试流失tips 签订契约 普及意义 给予奖励 有效沟通 网络平台问卷收集tips 设定网页显示时长 设定检测题 设定有条
19、件的被试费52三、数据收集后实验后如何对待被试、妥善处理收集到的数据?事后询问 事后解释 妥善保存原始数据 谨慎处理研究数据53共同方法偏差 共同方法偏差(Common Method Bias,CMB)指的是因为同样的数据来源或评分者、测量环境、项目语境以及项目本身特征所造成的预测变量与效标变量之间人为的共变。54共同方法偏差的来源55控制共同方法偏差的方法 程序控制 测量距离较远的心理特征;通过匿名评价,减少评价者的忧虑或社会赞许性;平衡项目或问题的顺序。增加项目的有效性;通过不同的方式来获取不同变量的度量值;合理设置量表项目的数量,既不过多,也别太少。设置不同的李克特等级数;正反向计分交叉设计;使用多种施测方式(如纸笔测验和网络测验);将不同变量的测量时间和地点分离开来。统计控制 偏相关过程设计。相关独特性模型。直接结果模型。潜在误差变量控制法。多质多法模型。谢谢!