1、广东省大学生创新实验项目答辩广东省大学生创新实验项目答辩非接触式人机交互中的非接触式人机交互中的用户行为分析与控制规范研究用户行为分析与控制规范研究指导教师指导教师徐向民徐向民小组成员小组成员范伟龙范伟龙 秦冲秦冲 刘晓刘晓 王奕森王奕森 黎宇航黎宇航 电子与信息学院电子与信息学院非接触式人机交互中的用户行为分非接触式人机交互中的用户行为分析与控制规范研究析与控制规范研究1.项目背景项目背景2.项目目标项目目标3.研究内容研究内容4.创新点创新点5.相关信息相关信息u人机交互已成为智能电视关键技术 三星、东芝、LG、索尼、TCL、长虹、海尔等电视厂商最新推出初步带有手势、语音等新型非接触式交互
2、功能电视产品u非接触式控制将成为未来智能电视控制方式的一种重要手段 按键式 接触式（触摸屏）非接触式（声音、手势）项目背景项目背景交互过程技术瓶颈交互过程技术瓶颈现今的交互技术在硬件上易受光线、噪声等的干扰，从硬件上进行优化需要较长时间当前，非接触式交互控制处于起步阶段，非接触式控制目前缺乏较好的控制规范易受干扰产生误识别项目目标项目目标目标一：提取用户界面元素，建立用户控制行为预判及反馈提示机制，提高控制准确度，提升交互体验目标二：基于目标一，通过完善非接触式交互设计规范，尝试填补智能电视终端中的非接触式交互控制规范的空白u（1）智能电视终端中界面元素及其交互过程分析对Win7与Androi
3、d上界面元素进行底层信息的提取、分类、结构描述与编程；分析交互任务及其流程，提炼基本交互操作模式模块；分析基本交互操作模式模块的应用情境、设计目的以及设计原则，建立交互操作模式模块之间的相互关系。研究内容研究内容u（2）控制对象与用户行为习惯的关联分析通过大量实验测试，建立用户行为与交互操作模式模块对应关系；结合交互上下文、先验知识、在线学习，实现对用户交互行为的预测；研究视、听觉在人的情境认知中所起的作用，设计相应的反馈提示机制以及出错控制。研究内容研究内容u（3）建立智能电视终端中的非接触式交互控制规范u（4）系统优化、测试与改进研究内容研究内容（1）通过提取用户界面元素，分析控制对象与用
4、户行为习惯的关联，建立用户行为预判及反馈提示机制，提高控制准确度，提升交互体验；（2）基于（1）的研究成果，通过完善非接触式交互设计规范，尝试填补智能电视终端中的非接触式交互控制规范的空白。创新点创新点（1）项目研究报告1份 包含：智能电视终端中界面元素及其交互过程研究 控制对象与用户行为习惯的关联研究 智能电视终端中的非接触式交互控制规范研究（2）建立控制规范与演示系统1套（3）申请发明专利12件预期研究成果预期研究成果时间具体安排20192019年年 7 7月月 2019 2019年年1212月月智能电视终端中界面元素及其交互过程智能电视终端中界面元素及其交互过程分析分析20192019年
5、年1 1月月 20192019年年6 6月月建立被控对象与用户行为关联模型建立被控对象与用户行为关联模型20192019年年7 7 月月 20192019年年1212月月提出智能电视终端中的非接触式交互控提出智能电视终端中的非接触式交互控制规范制规范20192019年年1 1 月月20192019年年 3 3 月月实现交互实现交互方案演示系统方案演示系统20192019年年3 3 月月20192019年年5 5月月系统优化、完成相关报告和申请专利系统优化、完成相关报告和申请专利计划项目研究时间安排计划项目研究时间安排支出项目支出项目用途用途预算额预算额文献书籍文献书籍获取相关资料，用获取相关资
6、料，用于实证分析于实证分析30003000设备材料设备材料小型仪器设备费小型仪器设备费20002000办公用品办公用品文献资料复印及测文献资料复印及测试加工试加工20002000文章专利文章专利用于申请专利或论用于申请专利或论文发表文发表 30003000经费预算及使用计划经费预算及使用计划u团队成员一同参加过非接触式研究的相关工作，有团队成员一同参加过非接触式研究的相关工作，有一定的工作经验一定的工作经验项目实施基础项目实施基础范伟龙范伟龙参加过参加过“新型非接触式人机交互关键技术研究新型非接触式人机交互关键技术研究”SRP项目；曾获二项目；曾获二等奖学金等奖学金刘晓刘晓参加过参加过“新型非
7、接触式人机交互关键技术研究新型非接触式人机交互关键技术研究”SRP项目；曾获国项目；曾获国家励志奖学金家励志奖学金王奕森王奕森大一时智育和综合测评成绩均为全班第一大一时智育和综合测评成绩均为全班第一黎宇航黎宇航曾参加过国家大学生创新实验项目曾参加过国家大学生创新实验项目汽车智能预警系统汽车智能预警系统，并参加过，并参加过“新型非接触式人机交互关键技术研究新型非接触式人机交互关键技术研究”项目；曾获校三好学生项目；曾获校三好学生秦冲秦冲参加过新型人机交互创新实验室手势识别项目相关工作参加过新型人机交互创新实验室手势识别项目相关工作徐向民徐向民（指导老师）（指导老师）：与多家企业合作承担省重大科技项目与多家企业合作承担省重大科技项目“数字家庭数字家庭中新型人机交互方式及其芯片设计中新型人机交互方式及其芯片设计”谢谢！谢谢！
