1、第第3 3章章 情绪的表情情绪的表情 第一节第一节 表情概述表情概述n什么是表情什么是表情n表情的普适性表情的普适性n表情的差异性表情的差异性一、什么是表情一、什么是表情n表情：表情：是指个体情绪、情感的外在表是指个体情绪、情感的外在表现。现。二、表情的普适性二、表情的普适性n来自跨文化研究的证据来自跨文化研究的证据n来自正常婴儿及先天盲童的证据来自正常婴儿及先天盲童的证据一来自跨文化的证据一来自跨文化的证据nEkman的系列研究的系列研究n实验实验1 n实验实验2n实验实验3n研究研究4Ekman的研究的研究1n被试：来自被试：来自5 5种不同文化背景种不同文化背景智力、智力、阿根廷、巴西、
2、日本、美国的人阿根廷、巴西、日本、美国的人n材料：一些表情图片材料：一些表情图片n结果：对表情图片的再认没有文化差异结果：对表情图片的再认没有文化差异Ekman的研究的研究2n被试：从未接触过现代文明的巴布新几被试：从未接触过现代文明的巴布新几内亚高地人内亚高地人n研究材料：研究材料：3万多米长的部落生活影片万多米长的部落生活影片n结果：结果：n在影片中未发现任何陌生的面部表情在影片中未发现任何陌生的面部表情n对影片中的表情解读证明是正确的对影片中的表情解读证明是正确的Ekman的研究的研究3n被试：沸耳人被试：沸耳人n研究材料研究材料n白人的表情照片白人的表情照片n沸耳人的照片沸耳人的照片n
3、任务：用每种表情编一个故事任务：用每种表情编一个故事n结果：沸耳人编的故事符合表情表达的结果：沸耳人编的故事符合表情表达的情绪。情绪。白人的表情沸耳人的表情沸耳人的表情沸耳人的表情沸耳人的表情Ekman的研究的研究4 4n被试：被试：300多的沸耳人多的沸耳人n材料：沸耳人的表情照片材料：沸耳人的表情照片n任务：讲述一个故事，令被试选择一张任务：讲述一个故事，令被试选择一张符合故事情节的照片符合故事情节的照片n结果：结果：n喜悦、愤怒、厌恶和悲伤很确定喜悦、愤怒、厌恶和悲伤很确定n恐惧和惊奇较难分辨恐惧和惊奇较难分辨七种情绪表情七种情绪表情EKman的的研研究究结结果果n人类的面部表情是由基因
4、控制，与生俱人类的面部表情是由基因控制，与生俱来的；来的；n人类的七种根本面部表情不存在跨文化人类的七种根本面部表情不存在跨文化差异愉快、厌恶、悲伤、恐惧、愤怒、差异愉快、厌恶、悲伤、恐惧、愤怒、惊奇、轻蔑惊奇、轻蔑二来自正常婴儿及先天盲童的证据二来自正常婴儿及先天盲童的证据n正常婴儿的证据：正常婴儿的证据：两岁前的婴儿就显露两岁前的婴儿就显露出成年人情绪表达行为的全部特征，尤出成年人情绪表达行为的全部特征，尤其是哭、笑、大笑。其是哭、笑、大笑。n先天盲童和正常儿童有同样的表情。先天盲童和正常儿童有同样的表情。三、表情的差异性三、表情的差异性n情绪表达的文化多样性情绪表达的文化多样性n社会化对
5、情绪表达的影响社会化对情绪表达的影响一情绪表达的文化多样性一情绪表达的文化多样性n不同文化对于情绪表达具有不同的标准不同文化对于情绪表达具有不同的标准和标准和标准n个人主义文化强调个体的需求，重回报、个人主义文化强调个体的需求，重回报、自由、平等、个人享乐自由、平等、个人享乐n集体主义文化强调集体的需求，重视他集体主义文化强调集体的需求，重视他人的赞赏、为了团体利益人的赞赏、为了团体利益n集体主义文化下不推崇表达负性情绪集体主义文化下不推崇表达负性情绪文化对情绪表达影响的研究文化对情绪表达影响的研究n被试：来自两种文化背景的大学生被试：来自两种文化背景的大学生n个人主义文化：美国个人主义文化：
6、美国n集体主义文化：哥斯达黎加集体主义文化：哥斯达黎加n研究任务：研究任务：n向情绪引发者表达自己的积极和消极情绪向情绪引发者表达自己的积极和消极情绪时，被试的舒适度如何。时，被试的舒适度如何。n结果：结果：n积极情绪没有差异，负面情绪有差异。积极情绪没有差异，负面情绪有差异。二社会化对情绪表达的影响二社会化对情绪表达的影响n表露规那么：是指人们在社会生活中学表露规那么：是指人们在社会生活中学到的，依不同文化而不同的控制表情的到的，依不同文化而不同的控制表情的规那么。规那么。n有时力图掩盖情绪，有时表现于内心不有时力图掩盖情绪，有时表现于内心不一致的表情一致的表情n失败者不会在众人前表达失望和
7、沮丧失败者不会在众人前表达失望和沮丧n表情表达的性别差异表情表达的性别差异第二节第二节 情绪表情情绪表情n面部表情面部表情n语调表情语调表情n姿势表情姿势表情一、面部表情一、面部表情n面部表情概述面部表情概述n面部表情功能面部表情功能n面部表情的测量面部表情的测量一、面部表情一、面部表情n定义：是指通过眼部肌肉、颜面肌肉和定义：是指通过眼部肌肉、颜面肌肉和口部肌肉的变化来表现的各种情绪状态。口部肌肉的变化来表现的各种情绪状态。n眼眼n眉眉n嘴嘴n鼻鼻n脸色脸色均能表示情绪均能表示情绪喜悦喜悦痛苦痛苦忧伤忧伤一面部表情概述一面部表情概述nEkman关于面部表情的研究结果关于面部表情的研究结果n眼
8、睛对表达忧伤最重要眼睛对表达忧伤最重要n口部对表达快乐和厌恶最重要口部对表达快乐和厌恶最重要n眼睛、嘴、前额对表达愤怒情绪最重要眼睛、嘴、前额对表达愤怒情绪最重要脸部各器官在表情识别中的作用脸部各器官在表情识别中的作用n眉毛眉毛n皱眉：不同意，烦恼；盛怒皱眉：不同意，烦恼；盛怒n扬眉：兴奋扬眉：兴奋n眉毛闪动：欢送或加强语气眉毛闪动：欢送或加强语气n眉毛扬起后短暂停留再降下，表示惊讶眉毛扬起后短暂停留再降下，表示惊讶或悲伤或悲伤脸部各器官在表情识别中的作用脸部各器官在表情识别中的作用n眼睛眼睛n正视表示庄重正视表示庄重n仰视表示思索仰视表示思索n斜视表示轻蔑斜视表示轻蔑n俯视表示羞涩俯视表示羞
9、涩脸部各器官在表情识别中的作用脸部各器官在表情识别中的作用n眼睛眼睛n瞳孔放大：看到很喜欢的人或事物瞳孔放大：看到很喜欢的人或事物n瞳孔缩小；看到不喜欢的人或事物瞳孔缩小；看到不喜欢的人或事物n嘴唇嘴唇n嘴唇半开表示有疑问、奇怪嘴唇半开表示有疑问、奇怪n嘴唇向下表示痛苦、悲伤嘴唇向下表示痛苦、悲伤n嘴唇撅着表示生气、不满意嘴唇撅着表示生气、不满意n嘴唇绷着表示愤怒、对抗或决心已定嘴唇绷着表示愤怒、对抗或决心已定二面部表情的功能二面部表情的功能n面部表情的反响功能面部表情的反响功能n面部表情会影响情绪体验面部表情会影响情绪体验n面部表情的生存价值面部表情的生存价值n面部表情向他人传递情绪状态，并
10、引起他人面部表情向他人传递情绪状态，并引起他人的反响信号作用的反响信号作用n面部表情具有生存价值的研究证据面部表情具有生存价值的研究证据n面部表情的感染功能面部表情的感染功能n看见他人的面部表情，会无意识的模仿其面看见他人的面部表情，会无意识的模仿其面部表情，并激活相似的情绪部表情，并激活相似的情绪面部表情可以作为情绪信号的证据面部表情可以作为情绪信号的证据n各种不同文化对各种不同文化对happiness,sadness,surprise,anger,disgust,and fear 的分类有高度的一致的分类有高度的一致性性n实验诱发被试积极、消极情绪时，伴随着相实验诱发被试积极、消极情绪时，
11、伴随着相应的表情应的表情n盲人和婴儿也具有成人一样的表情盲人和婴儿也具有成人一样的表情n不同的表情有不同的自主神经系统和脑部活不同的表情有不同的自主神经系统和脑部活动动面部表情具有生存价值的证据面部表情具有生存价值的证据1988n研究者的假设：研究者的假设：n愤怒等面部表情能对危险起警示作用，所愤怒等面部表情能对危险起警示作用，所以愤怒表情比愉快更容易识别。以愤怒表情比愉快更容易识别。n研究材料：两类照片研究材料：两类照片n一人表情愤怒，其余表情是愉快的一人表情愤怒，其余表情是愉快的n一人表情愉快，其余表情是愤怒的一人表情愉快，其余表情是愤怒的n被试的任务：被试的任务：n找出照片中具有不同表情
12、的人找出照片中具有不同表情的人面部表情具有生存价值的证据面部表情具有生存价值的证据1988n研究结果研究结果n从愤怒表情中找愉快表情的速度的平均时从愤怒表情中找愉快表情的速度的平均时间为间为1.451.45秒；秒；n从愉快表情中找愤怒表情的速度为从愉快表情中找愤怒表情的速度为0.910.91秒秒n随照片中人数的增加，寻找愉快表情的时随照片中人数的增加，寻找愉快表情的时间也相应增加，但寻找愤怒表情的时间并间也相应增加，但寻找愤怒表情的时间并没有增加没有增加三面部表情的测量三面部表情的测量nEkman的的“面部活动编码系统面部活动编码系统FACSn伊扎德伊扎德 n“最大限度区分面部肌肉运动编码系统
13、最大限度区分面部肌肉运动编码系统Maxn“表情区分整体判断系统表情区分整体判断系统Affexn表情识别表情识别1、Ekman的的“面部活动编码系统面部活动编码系统FACSn测量的是面部行为单元测量的是面部行为单元Action Unitsn 原因：原因：n可能不止一块肌肉才能形成一个行为单可能不止一块肌肉才能形成一个行为单元元n一块肌肉的不同部位可以形成不同的行一块肌肉的不同部位可以形成不同的行为单元为单元n材料：材料：n静态的图片静态的图片n动态的影片动态的影片1、Ekman的的“面部活动编码系统面部活动编码系统FACSn将表情分解成具体的面部行为单元将表情分解成具体的面部行为单元n共共46个
14、行为单元，还有个行为单元，还有12个行为单元包括头个行为单元包括头动和眼睛的注视动和眼睛的注视n对面部表情的行为单元记分能记录下该表情对面部表情的行为单元记分能记录下该表情的强度、和不对称性的强度、和不对称性n学会要花大概学会要花大概100个小时个小时n用计算机分析软件分析面部肌肉运动是那种用计算机分析软件分析面部肌肉运动是那种情绪情绪眉心眉心鼻根鼻根下眼睑沟下眼睑沟眶下沟眶下沟鼻翼鼻翼人中人中1A1B1C1D行为单元行为单元151E1F1G三个行为单元的四三个行为单元的四种组合种组合悲伤、撅嘴不快乐、悲伤、撅嘴不快乐、难以置信？难以置信？中性表情中性表情4i 和中性比较，眉毛和中性比较，眉毛
15、向下，向一起皱向下，向一起皱4ii和和4i的差异很微弱的差异很微弱w0w4眉毛间的皱纹倾眉毛间的皱纹倾向成垂直角度向成垂直角度AU 4Ekman的FACS的优点n具有跨文化的一致性具有跨文化的一致性n已针对已针对15种不同文化背景无论西方还种不同文化背景无论西方还是东方，有无自己的文字的人群的情是东方，有无自己的文字的人群的情绪做出了高度准确的预测。绪做出了高度准确的预测。n被试对情绪的效价和强度的主观报告高被试对情绪的效价和强度的主观报告高度正相关。度正相关。2 伊扎德的伊扎德的Max1979n将人的面局部为三个区域将人的面局部为三个区域n额眉鼻根区额眉鼻根区n眼鼻颊区眼鼻颊区n口唇下巴区口
16、唇下巴区n共列出共列出29种面部运动记录单位对应八种面部运动记录单位对应八种根本情绪的面部肌肉运动愉快、惊种根本情绪的面部肌肉运动愉快、惊奇、厌恶、愤怒、恐惧、悲伤、轻蔑、奇、厌恶、愤怒、恐惧、悲伤、轻蔑、痛苦痛苦2 伊扎德的伊扎德的Max1979n材料：录像；照片；手册婴儿材料：录像；照片；手册婴儿n手册：肌肉的分类、位置分布、详细描手册：肌肉的分类、位置分布、详细描述述n录像：面部肌肉运动的图像，示范，练录像：面部肌肉运动的图像，示范，练习习n测试到达标准的测试到达标准的80为通过为通过n效度效度n内容效度：与标准的表情照片为参照内容效度：与标准的表情照片为参照n构造效度：与其他表情评定技
17、术一致性构造效度：与其他表情评定技术一致性3.表情识别表情识别防止观察者偏差防止观察者偏差n表情识别：现代化的面部表情测量工具表情识别：现代化的面部表情测量工具n表情识别的过程：表情识别的过程：n表情库的建立表情库的建立n表情识别表情识别n特征提取特征提取n分类判别分类判别表情识别2.表情识别表情识别:n图像获取：图像获取：n通过摄像头等图像捕捉工具获取静态图通过摄像头等图像捕捉工具获取静态图像或动态图像序列。像或动态图像序列。n图像预处理：图像预处理：n图像的大小和灰度的归一化，头部姿态图像的大小和灰度的归一化，头部姿态的矫正，图像分割等。的矫正，图像分割等。n特征提取特征提取:n分类区分分
18、类区分思考思考n表情有跨文化差异吗？表情有跨文化差异吗？n表情无文化差异表情无文化差异n表情理解和表达有文化差异表情理解和表达有文化差异第三节第三节 姿态表情和语调表情姿态表情和语调表情n姿态表情与体态语言姿态表情与体态语言n语调表情语调表情一、姿态表情一、姿态表情n姿态表情：除面部之外身体其他部位的姿态表情：除面部之外身体其他部位的表情动作，包括表情动作，包括身体表情身体表情和和手势表情手势表情两两种。种。n头、手和脚是表达情绪的主要身体部位。头、手和脚是表达情绪的主要身体部位。n整个头部整个头部n脸脸n躯干躯干n肩肩n臂和腕臂和腕n臀部、腿和踝臀部、腿和踝n脚动作和走脚动作和走n颈部动作颈
19、部动作一姿态表情的特点一姿态表情的特点n信息量大视觉信息占信息量大视觉信息占8787n比较可靠比较可靠n表现力强表现力强n能够表达情感能够表达情感思考：思考：n姿态表情具有跨文化的一致性么？姿态表情具有跨文化的一致性么？n不具有跨文化一致性不具有跨文化一致性n手势表情是在社会文化中学习习得的。手势表情是在社会文化中学习习得的。体态表情有跨文化差异体态表情有跨文化差异n西方体态表情西方体态表情n耸肩耸肩n竖起中指竖起中指n其他文化下体态表情其他文化下体态表情n竖起大拇指竖起大拇指二姿态表情的相关研究二姿态表情的相关研究nEkman等人的研究等人的研究n面部是言语信息信息的最好传达者，脚和面部是言
20、语信息信息的最好传达者，脚和腿是最坏的传达者腿是最坏的传达者n身体姿势甚至比面部表情更能泄露真实信身体姿势甚至比面部表情更能泄露真实信息。息。n人们注意去学习对面部表情的控制，而对身体人们注意去学习对面部表情的控制，而对身体的控制很少注意。的控制很少注意。二姿态表情的相关研究二姿态表情的相关研究n姿态表情更容易泄露恐惧情绪姿态表情更容易泄露恐惧情绪n实验证据实验证据n参与者面前突然冲进身带武器的抢劫者，参与者面前突然冲进身带武器的抢劫者，将这些参与者的反响录下来。播放给其将这些参与者的反响录下来。播放给其他被试。他被试。n其他被试只能看到这些参与者的身体局其他被试只能看到这些参与者的身体局部部
21、n看到恐惧的身体姿态，被试的情绪相关看到恐惧的身体姿态，被试的情绪相关的脑区会出现活动。的脑区会出现活动。n看到快乐的图像，那么没有情绪的脑区看到快乐的图像，那么没有情绪的脑区活动。活动。二姿态表情的相关研究二姿态表情的相关研究n姿态表情更容易泄露情绪信息姿态表情更容易泄露情绪信息n尤其是膝盖以下尤其是膝盖以下n研究：对大学生进展言语挑衅和攻击研究：对大学生进展言语挑衅和攻击说谎时在体态上的表现说谎时在体态上的表现n一些典型的体态言语只表现出一局部一些典型的体态言语只表现出一局部n耸肩只耸一半耸肩只耸一半n体态言语增多体态言语增多说谎时在体态上的表现说谎时在体态上的表现n说谎时手势减少说谎时手
22、势减少n手势帮助语言的表达，或不知道如何表手势帮助语言的表达，或不知道如何表达；达；n手势在极度愤怒、恐惧、冲动、痛苦、手势在极度愤怒、恐惧、冲动、痛苦、兴奋时出现；兴奋时出现；n说谎时没有很强的情绪投入，所以手势说谎时没有很强的情绪投入，所以手势减少减少n需要句句斟酌时也会有较少的手势需要句句斟酌时也会有较少的手势说谎时在体态上的表现说谎时在体态上的表现n控制性的小动作增多控制性的小动作增多n挠、挖、抓、握、划、按、摩擦等行为挠、挖、抓、握、划、按、摩擦等行为n借助一些工具、铅笔、打火机、夹子等等、借助一些工具、铅笔、打火机、夹子等等、n咬嘴唇、舌顶面颊、绞头发、脚打拍子咬嘴唇、舌顶面颊、绞
23、头发、脚打拍子n注意：注意：控制性的小动作准确的说是内控制性的小动作准确的说是内心不安的表现，未必是说谎，跟个体差心不安的表现，未必是说谎，跟个体差异有很大关系异有很大关系n但假设控制性小动作一会增加，一会减但假设控制性小动作一会增加，一会减少，那么更是说谎的更可靠表现。少，那么更是说谎的更可靠表现。注意注意 防止奥赛罗错误被冤枉的人也可能恐防止奥赛罗错误被冤枉的人也可能恐惧、愤怒惧、愤怒 面部表情的个体差异面部表情的个体差异n为什么有人喜欢抓鼻子，有人喜欢绞头为什么有人喜欢抓鼻子，有人喜欢绞头发？发？n个人气质个人气质n闭上眼睛闭上眼睛羞愧羞愧“啊字表达的情绪啊字表达的情绪n天啊天啊!这是什
24、么世道啊？这是什么世道啊？n啊啊!放火的人竟然是他放火的人竟然是他!n啊啊!啊啊!我一定遵命。我一定遵命。n啊啊!终于盼来这一天了终于盼来这一天了!n啊啊!那么说，你真的容许了那么说，你真的容许了速度速度n动作急速，心情紧迫，或者语气带有命动作急速，心情紧迫，或者语气带有命令式，或者为了加强语势，往往语速要令式，或者为了加强语势，往往语速要快。快。n如播放球赛和领导人逝世时播音员的不如播放球赛和领导人逝世时播音员的不同声音。前者锋利、急促，后者缓慢消同声音。前者锋利、急促，后者缓慢消沉沉言语中的欺骗言语中的欺骗n口误口误n语言中的停顿过多或过长语言中的停顿过多或过长n“嗯、嗯、“啊的语气词的过多啊的语气词的过多n局部话语，局部话语，“我的意思是我的意思是过多过多n声调：声调：70的人在愤怒、恐惧时语调高的人在愤怒、恐惧时语调高而快，在悲伤时语调低而快，在悲伤时语调低
