1、2020-2021智能硬件用户体验指标及分类研究报告1、智能硬件指标及分类研究背景及方案2、智能硬件用户体验评价通用指标体系3、智能硬件产品分类及重点产品特征梳理4、具体产品指标建设及后续报告计划目录目前市场上智能硬件普及程度开始提升,且产品种类更趋多样化,加上消费升级趋势下, 智能硬件作为优质产品更受青睐,市场稳步扩大。数据显示,中国智能硬件市场发展较快, 2020年市场规模预计超万亿元。5132.76430.41076725%67%70%60%50%40%30%20%10%0%80%02000400060008000100001200020182020E但由于缺乏完善的市场质量监督体系,各
2、参与方资质差异较大,客观上导致市场上智能设备用户体验水平参差不齐,产品质量和用户体验成为下一阶段竞争重点。中国智能硬件市场规模及预测2019市场规模(亿元)增速交互方提供主 式要服务使用场智能化景要求研究背景研究背景智能硬件形智能硬件形态态多样性和特征差异性多样性和特征差异性智能硬件覆盖多个领域,产品形态丰富,使用目标及场景千差万别。不同产品用户在使 用过程中对产品的功能/服务需求、智能化程度的要求,以及交互方面存在很大差异。因此,在进行具体产品指标研究时,还需充分考虑各产品的特征差异。综合文献研究及以往测评经验,建议重点从如下4个方面进行归纳、分析:1、使用场景2、提供服务3、交互方式4、智
3、能化要求智能家居智能可穿戴行业智能产品智能音箱智能手表智能 交通智能摄像头智能电视/盒子智能传感器VR产品智能化要求交互方式提供服务使用场景智能硬智能硬 件类别件类别典型产典型产 品品分类研分类研 究究智能硬件用户体验通用评价体系构建分类特征梳理、产品特征梳理智能医疗具体业务指标体系及测试脚本(智能音箱、摄像头、门铃、儿童手表)主要工主要工 作及成作及成 果果构建通构建通 用指标用指标经典产品体验评价 模型智能硬件产品体验 影响因素智能硬件用户体验通 用评价体系1、智能硬件指标及分类研究背景及方案2、智能硬件用户体验评价通用指标体系3、智能硬件产品分类及重点产品特征梳理4、具体产品指标建设及后
4、续报告计划评估智能硬件的用户体验质量主要是评估:特定用户在特定使用场景下,与智能 硬件产品进行典型任务操作时,是否达到有效性、效率、安全性、智能性和情感愉悦 的预期目标。基于此我们提出了如下智能硬件用户体验质量评价模型1.该模型是结合IOS9241-11关于 用户体验的定义及智能硬件产 品质量特点制定的。2.影响智能硬件产品体验质量的 要素包括: 用户( 经验、期 望)、产品、使用场景。3.其中产品因素是影响用户体验 的最重要的因素,包括:智能 硬件、管理APP及操作系统、 云端智能能力以及人机交互质 量。智能硬件用户体验评价通用指标体智能硬件用户体验评价通用指标体系系为科学评价智能硬件产品用
5、户体验水平,中国移动研究院用户体验研究中心基 于上述模型,结合智能硬件产品测评经验,提出了智能硬件体验通用指标体系,用 以评估智能硬件的用户体验质量,包含硬件质量、人机交互、云端智能、管理软件4大一级维度,26个二级维度,175个测评指标智能硬件体验评价通用指标体系智能硬件体验评价通用指标体系语音交互软件交互触控交互硬件输入能力硬件处理能力硬件输出能力硬件外观云端内容资源云端服务能力覆盖云端服务质量功能操作界面布局硬件质量硬件质量人机交互人机交互云端智能云端智能管理软件管理软件1、智能硬件指标及分类研究背景及方案、智能硬件指标及分类研究背景及方案2、智能硬件用户体验评价通用指标体系、智能硬件用
6、户体验评价通用指标体系3、智能硬件产品分类及重点产品特征梳、智能硬件产品分类及重点产品特征梳理理4、具体产品指标建设及后续报告计划、具体产品指标建设及后续报告计划物理物理手柄手柄/按键按键/遥控遥控触摸触摸触摸屏触摸屏语音语音/视觉视觉语音语音/图像图像/手势识别手势识别自主大脑自主大脑无感控制无感控制交互交互 方式方式智能电视盒子(内容型)智能门铃/门锁(功能型)智能传感器(功能型)智能音箱(内容/平台 型)智能机器人(平台/服务型)智能后视镜(功能/内容型)智能摄像头(功能型)智能手表(功能型)智能手环(功能型)VR类产品(内容型)固固 定定 场场 景景可可 移移 动动 特特 定定 场场
7、景景全全 场场 景景使用使用 场景场景根据智能硬件产品的交互方式交互方式、使用场景使用场景、智能化程度智能化程度及提供服务提供服务4个维度,针对智能 家居、智能可穿戴典型智能硬件产品开展具体评价指标研究及测评典型智能硬件产品分类典型智能硬件产品分类固定场景固定场景可移动特定场景可移动特定场景全场景全场景场景分类场景分类特征特征影响因素影响因素建议关注指标建议关注指标固定场景固定场景1、网络环境较稳定,通常使用网线或固定wifi2、通常有稳定的电源供给网络本身的稳定性、速度多用户使用,识别、管理外观质量(与环境的匹配性)配件质量(如电源线长度)可移动特定场景可移动特定场景1、网络环境不固定稳定,
8、随着场景的变化,可能会在 各种网络之间切换2、不一定有稳定的电源供给,可能需要电池对网络种类的支持、切换剩余电量支持网络制式的种类、网络切换时延典型操作流量消耗移动场景移动场景1、网络环境不稳定,随着场景的变化,会经常在不同 网络之间切换 2、没有稳定的电源供给,需要电池供电对网络种类的支持、切换剩余电量环境变化外观质量支持网络制式的种类物理物理手手柄柄/按键按键/遥控遥控触摸触摸触摸屏触摸屏语音语音/视觉视觉语音语音/图像图像/手势识别手势识别自主大脑自主大脑无感控制无感控制交互方式分类交互方式分类影响因素影响因素建议关注指标建议关注指标物理交互1、物理按键位置2、物理按键的操作反馈质量按键
9、易操作性操作有效性触控交互1、与智能硬件配合的管理APP2、智能硬件自身系统软件导航清晰性架构合理性语音交互1、硬件本身的拾音质量2、硬件及系统的语音识别质量远场识音成功率语音识别抗干扰性手势/图像交互1、硬件本身的图像采集质量2、硬件及系统的手势/图像识别质量手势/图像识别成功率手势/图像识别时延功能型内容/娱乐型 平台/入口型提供服务分类提供服务分类特征特征影响使用体验因素影响使用体验因素建议关注指标建议关注指标功能型功能型1、产品功能明确,用户需求一般 稳定且可预测2、需长时间连接稳定的网络和电 源供给网络稳定性、速度产品功能、性能是否稳定、易 用功能完备性:是否能满足使用需求稳定性:能
10、稳定提供功能内内容容型型1、联网才可正常提供服务,对网 络依赖性强2、聚合多个内容提供方资源网络速率内容运营质量内容聚合能力内容丰富性平平台台型型1、入口型产品,使用门槛低,环 境适应性强,开放性好2、产品用户量大,对服务提供商 吸引力高;为各种服务接入,提供 管理标准接入服务的丰富性交互体验产品稳定性可提供服务端的丰富性人控制人控制人机协作人机协作机器自主决策机器自主决策智能化水平智能化水平产品特点产品特点影响使用体验因素影响使用体验因素建议关注指标建议关注指标联网感知类产品联网感知类产品1、产品功能单一2、连接稳定的网络网络稳定性传感器灵敏程度传感功能有效性产品灵敏度搭载部分人工智能的搭载
11、部分人工智能的 硬件产品硬件产品1、产品功能较为丰富2、交互通道多样化资源的共享自然语言识别能力语音模糊识别能力智能推荐能力强智能产品强智能产品1、产品智能化水平较高2、能较为准确的理解用户指令及意图对用户指令理解的准确性及 完成程度产品外观自主决策能力1、使用场景方面、使用场景方面a) 在远程操控方面:在远程操控方面:音箱上加入摄像头后,为视频通话等 操作提供了极大便利。除关注功核心功能覆盖,还需重 点关注音视频通话操作;b) 特定特定环境下的移动场环境下的移动场景景:需考虑在家庭环境下,可能会 将音箱挪换使用位置的影响。2、交互方、交互方式式方面:方面:a) 语音交互为主,重点关注语音交互
12、方面指标;b) 有屏幕音箱,可提供更多服务内容,需关注屏幕信息呈现;c) 音箱作为家庭用产品,要照顾不同人群的使用差异,如儿童 使用时,语言逻辑性更差,语音指令输入更慢,需重点关注。3、提供服务及智能化要求方面、提供服务及智能化要求方面a) 音箱作为内容呈现载体,应重点关注音视频内容的丰富程度;b) 音箱作为互联网服务的入口,应重点关注互联网服务的有效性。重点产品特征梳理重点产品特征梳理智能音智能音箱箱1、在使用场景方、在使用场景方面面(固定场景)(固定场景)a) 在使用群体上:在使用群体上:由于枪机型摄像头为半专业级摄像头,针对的用户也分为家用及商用两种类型,需关注家用环境下的监 控画面质量
13、等指标外,还需关注针对于室外的环境因素,以满足商用场景下对于突发情况的监控需求;b) 在使用环境上:在使用环境上:有安装于室外的情况,需关注摄像头的防尘防水类方面能力。同时还需要考虑安装室外机及调试操作。2、在交互方式方面(、在交互方式方面( APP操作为主、辅以动作、声音操作为主、辅以动作、声音识识别别)a) 枪机摄像头的主要交互方式为通过App查看或控制摄像头,应该重点关注监控页面的设计。3、在提供服务及智能化要求方面、在提供服务及智能化要求方面(功能功能服服务务+低低智智能化)能化)a) 考虑到摄像头需要针对于监控场景进行实时拍摄录制,所以对于存储功能和服务需要重点关注;b) 智能识别、
14、报警警告提示是家庭安防摄像头重要的服务,应对相关指标加以关注。重点产品特征梳理重点产品特征梳理智能摄像头(室外枪机)智能摄像头(室外枪机)1、使用场景方面、使用场景方面a) 因考虑到儿童在移动场景下使用,关注定位、联网等方面;b) 因考虑到特殊的使用人群,关注手表安全性以及佩戴等方面;c) 考虑到有家长远程监控的需求,重点关注监控画面和监控质量等方面。2、交互方面、交互方面a) 因考虑到有家长监控的需 要,应在管理软件方面,重 点关注远程监控、定位等;b) 因考虑到有音视频通话的需 要,应在管理软件方面,关 注消息发送(接收);c) 因考虑到有硬件SOS呼叫的 操作,应在硬件交互方面, 重点关
15、注。3、提供的服务及智能化要、提供的服务及智能化要 求方面求方面a) 考虑到儿童手表特定的目标 人群,所能进行的操作有限, 对手表的部分设置功能放在 了管理软件端,因此,重点 关注管理软件的功能;b) 考虑到儿童手表有辅助学习、 满足娱乐的需要,应在云端 智能方面侧重儿童教育及儿 童娱乐内容的关注。重点产品特征梳理重点产品特征梳理智能儿童手智能儿童手表表1、在使用场景方面(固定场景)、在使用场景方面(固定场景)a) 考虑到智能门铃(门外设备)使用的环境,受光线影响较大,因此需要关注门铃设计在不同光线环境下的表现;b) 考虑到智能门铃属于固定场景类需要安装使用的产品,需要更多的关注产品的安装、续
16、航能力等;c) 考虑到产品安装在户门外,需要关注产品的防盗性设计;d) 对讲是智能门铃的重点功能,需关注音频输出能力。2、在交互方式方面(、在交互方式方面( APP操作为主操作为主)a) 智能门铃的主要交互方式为通过APP查看实时监控、进行视频对讲、查看 事件通知及其他相关设置功能,应该重点关注。3、在提供服务及智能化要求方面、在提供服务及智能化要求方面(功能功能服服务务+低低智智能化)能化)a) 智能识别可以提供更好的安防服务,需关注图像识别等相关智能方面;b) 考虑到智能门铃的安防定位,需要重点关注异常或事件时产品表现;c) 考虑到监控画面的存储与安全,还需重点关注存储方面。重点产品特征梳
17、理重点产品特征梳理智能门铃智能门铃1、智能硬件指标及分类研究背景及方案2、智能硬件用户体验评价通用指标体系3、智能硬件产品分类及重点产品特征梳理4、具体产品指标建设及后续报告计划制定具体产品指标及测评脚本制定具体产品指标及测评脚本智能硬件体验通用评价体系智能硬件体验通用评价体系硬件质量硬件质量人机交互人机交互云端智能云端智能管理软件管理软件结合产品特征和实际使结合产品特征和实际使用用场景场景,制定制定 可执行的可执行的测评脚本测评脚本智能摄像头体验评价指标体系智能音箱体验评价指标体系智能儿童手表体验评价指标体系智能门铃体验评价指标体系根据产品的分类和差异化特征,在通用指标框架中选取、裁剪和补充根据产品的分类和差异化特征,在通用指标框架中选取、裁剪和补充具体产品测评指标具体产品测评指标硬件质量测评脚本硬件质量测评脚本模糊识别测评脚本模糊识别测评脚本内容覆盖测评脚本内容覆盖测评脚本服务覆盖测评脚本服务覆盖测评脚本基础性能测评脚本基础性能测评脚本语义理解测评脚本语义理解测评脚本多轮对话测评脚本多轮对话测评脚本管理管理APP测测评脚本评脚本THANKS