1、基于大数据深度学习的智能视频分析及应用基于大数据深度学习的智能视频分析及应用智能视频和智能分析智能视频和智能分析技术和产品技术和产品技技术术和和产产品品-视频视频大数据大数据1.智能识别、自动报警智能识别、自动报警(技术实用,国内一流,自有技术技术实用,国内一流,自有技术)-无需人员盯看视频,机器智能研判,自动报警,解放人力,大幅减少漏看-仅需监视和跟踪 1/200,1/500 的异常,对异常处理更精确2.视频浓缩视频浓缩,高效查询高效查询(技术实用,国际一流,算法模块技术实用,国际一流,算法模块OEM)-无需人工数十小时,数百十小时长时间审看,代之以机器高效查询-可借助视频特征由机器快速查询
2、,提高效率数百倍!3.智能机器学习智能机器学习(技术实用,国际一流,技术实用,国际一流,OEM+自有技术自有技术)-面对多变复杂的监控对象,让机器具备自学习能力,柔性适应变化!-避免每次监控对象的变化,产生新开发;节省成本,节省开发时间!4.视频大数据自动管理视频大数据自动管理(技术实用,大数据业界一流,自有技术技术实用,大数据业界一流,自有技术)-自动记录和存放海量视频数据,自动配套元数据,非结构视频数据自动结构化非结构视频数据自动结构化-高效支持业务视频数据的各类分析,统计和报表,支持基于视频数据内容管理 技技术术和和产产品品-智能大数据智能大数据 分析分析5.机器学习的大数据自动调优机器
3、学习的大数据自动调优(技术实用,国际一流,自有技术技术实用,国际一流,自有技术)问题问题:Hadoop是目前应用得最广的大数据平台,Hadoop平台有多达200多个配置参数对平台的性能有着重要影响,没有调优的大数据平台性能一般不好没有调优的大数据平台性能一般不好。但,优化这些参数配置是一个非常困难的工作(太多参数组合),这类有经验的性能专家有经验的性能专家非常少。自动调优自动调优:利用机器学习方式开发的自动调优软件,让机器完成大量枯燥运行试验数据的自动观察学习,智能评价,最后自动推荐优化配置参数。6.机器深度学习机器深度学习-疑似车辆发掘疑似车辆发掘(技术实用,国内首创,自有技术技术实用,国内
4、首创,自有技术)-根据公安,交通,海关等政府客户的疑似车辆定义,软件自动在海量数据中计算挖掘出特定疑似车辆-借助该软件,可轻松发掘各类疑似和违规车辆的活动规律,数十倍,百倍提高执法效率!7.机器深度学习的交通智能分析机器深度学习的交通智能分析(技术实用,国内一流,开发中技术实用,国内一流,开发中)-面对海量的结构化和非结构化交通数据,借助该软件可智能分析各类违规造成的交通拥堵,各类交通模拟措施带来的流量变化,自动抓住各类交通违规 智能视频应用智能视频应用 解决方案和软件模块解决方案和软件模块所有模所有模块块可灵活搭配,可可灵活搭配,可选选,也可用第三方,也可用第三方软软件件可定制的业务流程管理
5、可定制的业务流程管理基本数据展示模块可选,可定制,也可用第三方软件机器学习,智能挖掘非法车辆机器学习,智能挖掘非法车辆视频浓缩,快速查询视频浓缩,快速查询可选智能视频(车牌车型识别,入侵行为识别和报警)智能视频(车牌车型识别,入侵行为识别和报警)可选分布式文件系统分布式文件系统+Hadoop+视频数据自动结构化存放视频数据自动结构化存放基础模块,可选也可用第三方的智能交通应用智能交通应用 解决方案和软件模块解决方案和软件模块所有模所有模块块可灵活搭配,可可灵活搭配,可选选,也可用第三方,也可用第三方软软件件可定制的业务流程管理可定制的业务流程管理基本数据展示模块可选,可定制,也可用第三方软件机
6、器学习,智能挖掘非法车辆机器学习,智能挖掘非法车辆实时车辆轨迹分析工具实时车辆轨迹分析工具可选中间件:中间件:可视化数据加载,平台自动调优,可视化数据加载,平台自动调优,SQL On Hadoop可选分布式文件系统分布式文件系统+Hadoop+结构化和非结构化数据自动存放结构化和非结构化数据自动存放基础模块,可选也可用第三方的领先的大数据机器学习技术基于机器深度学習的视频图像处理实现低成本?高精度?高柔性的图像解析处理充分的机器学 习后,环境变化和車以外对象的检测也能高精度,柔性对应!无需再开发!低成本对于变化的情况,无需再由图像解析专家进行智能开发和调优!高精度采用机器学習领域世界领先的图像
7、解析技术高柔性通过充分的机器学習、人能识别的事,行为,机器一般都能办到!RAPID機械器習No.1无需专家,基于自动机器学习的智能视频图像处理?让机器認識和学习大量的対象?対象外图像?認識対象?対象外图像差異,以此为引擎?再将识别対象交给机器判断学習阶段(事前処理)猫的图像与猫接近的动物图像无关的图像認識対象学習机器学习引擎询问認識対象外图像学習应用阶段是猫吗?判定Yes!No!No!机器深度学习技術 算法之一图像?声音?文字等高精度自動检测构建与人大脑一样的多层神经网络而实现维图像输入狗狗输入x1 x2 x3 x4猴通过学习,与猫的图像相像的数据节点的输出值变大x1 x2 x3 x4何物?x
8、1 x2 x3 x4猫神经网络猫学习猫应用相应上部各节点的输入值,下部得到输出值输出输入猫的图像,则显示猫猫狗猴的输出值应该很大,按此学习模型生成猫来调整神经网络是猫!采用多层神经网络来学习大量数据,因此需要很大内存和很强CPU来存放和计算图像数据解析应用例:防犯/违规检测需要常检测的业务,实施基于智能的视频监测,大幅度提高效率,提高监测精度过去方式过去方式长时间察看耗费人工監視対象过多看漏,或看不过来视频监测数据人工监视人工监视智能和学智能和学习习方式方式異常检出检测模型报警有的出動!警員仅关注和察看报警视频图像!智能自动检测智能自动检测!監視摄像机检测防止遗漏!只需察看1/100 的报警图
9、像即可其他教師数据例監視图像数据(含正常、異常)视频管理我们领先的 机器学习机器学习 和 大数据分析大数据分析 技术-适用领域过去由人进行的多种“研判研判”工作,靠 大数据和机器学习大数据和机器学习,由机器自动自动且高速高速 实现智能智能交通交通?自动判别违规?高效解决交通问题安全管理安全管理?安全隐患防患未然?视频监控高效化製造?降低检测成本?高效适应客户需求平安城市?小区和区域安全的提高?基础设备的异常自动发现?最优路径推荐?个性化服务预测?服务精度提高流通/服务机器学习?少人力条件下的智能管理?高效的自动报警?环境变化的自适应政府海关政府海关养老服务?远程介护?智能服务商业企业?商业数据
10、挖掘?商业机会和趋势分析金融?投資分析判断?违规交易监测円社1000社300円社社500円250円 社250円智能视频和智能分析智能视频和智能分析物联网应用物联网应用1油田自动化管理油田自动化管理油田物联网应用油田物联网应用:基于智能视频和大数据的高效安全管理和运营管理基于智能视频和大数据的高效安全管理和运营管理油田的主要问题油田的主要问题?1 视频审看难视频审看难?低效、人工低效、人工1-1审审看靠人看靠人?耗耗费费大量人力大量人力,运运营营成本很高,成本很高,效率低,效率低,依然漏看依然漏看.1-2查询查询靠人靠人?费时费时,耗工,耗工 安全安全报报警警难难以管理以管理2视频数据分析管理难
11、视频数据分析管理难2-2非非结结构性数据无法支持构性数据无法支持检检索和索和统计统计?靠人、海量靠人、海量 视频视频无法管理无法管理2-1 原始原始视频视频的分析靠人眼,的分析靠人眼,实际实际无法分析无法分析2-3与与业务业务数据数据SQL 接口无法接口无法实现实现,关,关联联分析无从着手分析无从着手3安全管理和运营管理安全管理和运营管理??安全和运安全和运营营目目标难实现标难实现3-1 仅导仅导入入视频监视频监控硬件,控硬件,难难达到安全达到安全监监控目控目标标3-2对对运运营营管理的自管理的自动动化,基本无法化,基本无法 实现实现油田视频监控系统油田视频监控系统-智能大数据架构智能大数据架
12、构第x采油小队监控视频LAN警报视频监控视频100台摄像头运动检测运动检测入侵识别入侵识别-a 监控元数据(时间,地点,类型)视频录像监控室监控室-b 处置油田数据中心进出车辆统计分析进出人员统计分析元数据+视频录像大数据分析大数据分析警报类型分析警报处置率?全天候24小时无间断的自动动态监控?监测非法入侵,及时预警,大幅减少监控成本?监控数据的 大数据分析及监管大数据分析及监管Page 15油田物联网应用油田物联网应用:基于智能视频和大数据的高效安全管理和运营管理基于智能视频和大数据的高效安全管理和运营管理必要技术和主要功能必要技术和主要功能 油田方案油田方案1 智能视频处理智能视频处理1-
13、1智能分智能分类类?自自动动区分内部和外部区分内部和外部车辆车辆等等1-2入侵入侵监测监测?无人自无人自动动入侵入侵监测监测等等1-3机器学机器学习习?柔性适柔性适应监应监控控对对象的象的变变化化?高效、智能高效、智能2大数据分析管理平台大数据分析管理平台2-1自自动视频动视频和元数据和元数据 存放于大数据平台存放于大数据平台2-2支持支持结结构性和非构性和非结结构性数据的混合构性数据的混合检检索索2-3各各类类高效分析和高效分析和统计统计?高效、自高效、自 动动化管理化管理2-4与管理与管理软软件的件的 SQL 接口,大数据展示接口等接口,大数据展示接口等3安全管理和运营管理软件安全管理和运
14、营管理软件3-1入侵安全入侵安全监监控管理流程定制控管理流程定制软软件件3-2自自动动化高效运化高效运营营管理流程定制管理流程定制软软件件?快速定制快速定制智能视频和智能分析智能视频和智能分析物联网应用物联网应用2某部委三级监控平台某部委三级监控平台自动化管理自动化管理政府物联网应用政府物联网应用:基于智能视频和大数据的高效安全管理和运营管理基于智能视频和大数据的高效安全管理和运营管理主要问题主要问题?1 三级监控平台三级监控平台 难点难点?信息孤信息孤岛岛,统统一管理一管理难难1-1 数十数十视频视频二二级级中心,中心,200多三多三级级中心,形成多信息孤中心,形成多信息孤 岛岛.1-2无法
15、支持无法支持视频视频数据数据统统一管理,一管理,统统一一业务业务数据支持数据支持 2视频数据分析管理难视频数据分析管理难2-2非非结结构性数据无法支持构性数据无法支持检检索和索和统计统计?靠人、海量靠人、海量 视频视频无法管理无法管理2-1 原始原始视频视频的分析靠人眼,的分析靠人眼,实际实际无法分析无法分析2-3与与业务业务数据数据SQL 接口无法接口无法实现实现,关,关联联分析无从着手分析无从着手3安全管理和运营管理安全管理和运营管理??安全和运安全和运营营目目标难实现标难实现3-1 仅导仅导入入视频监视频监控硬件,控硬件,难难达到安全达到安全监监控目控目标标3-2对对运运营营管理的自管理
16、的自动动化,基本无法化,基本无法 实现实现智能智能视频应视频应用用:智能智能视频应视频应+分布式文件系分布式文件系统统的的三三级监级监控架构控架构 某部委项目进行时总总中心一中心一级监级监控中心控中心:对全国数十个下属单位的结构化后视频数据可有效管理结构化后的数据由多个二级监中心自动,动态传送至总监控中心IBMIBM总总中心平台中心平台仅仅上上传结传结构化数据构化数据(可可选传选传部分部分视频视频快照快照)数十个二数十个二级监级监控数据中心控数据中心二级中心视频元数据二级中心视频元数据浓缩视频和视频快照浓缩视频和视频快照海关等非结构化数据等非结构化数据管理:管理:数据采集,分类,原数据管理,视
17、频快照管理,访问管理自自动动同步同步结结构化和非构化和非结结构化数据构化数据视频元数视频元数据数据卷据数据卷视频快照视频快照浓缩视频浓缩视频视频元数视频元数据数据卷据数据卷视频快照视频快照浓缩视频浓缩视频视频元数视频元数据数据卷据数据卷视频快照视频快照浓缩视频浓缩视频视频元数视频元数据数据卷据数据卷视频快照视频快照浓缩视频浓缩视频三三级级子中心子中心三三级级子中心子中心三三级级子中心子中心三三级级子中心子中心智能智能视频应视频应用用:正常正常业务视频业务视频数据数据-自自动结动结构化构化WAN/3G/4G自动生成监控元数据、生成视频快照并触并触发发正常事件消息正常事件消息保存监控元数(时间、智
18、能视频分析智能视频分析地点、事件类型等)据并建立索引,保存视频快照及原始视频存放位置视频元数据视频元数据数据卷数据卷摄像头保存浓缩视频及视频快照视频快照及浓缩视频快照及浓缩卷卷二二级级中心下属中心下属各子中心各子中心数据自动由子中心向二级中心同步视频元数据可根据需要自动与相关的信息合并关联生成完整的信息纪录相关信息数据库相关信息数据库省省级级数据中心存放:数据中心存放:视频视频快照快照+元元大数据平台大数据平台数据数据(结结构化后数据)构化后数据)目目标标:80-90%业务视频结业务视频结构化构化工作自工作自动动完成完成业务统计,分析,数据挖掘智能视频和智能分析智能视频和智能分析物联网应用物联
19、网应用3某市交警某市交警交通大数据分析挖掘交通大数据分析挖掘智能交通智能交通大数据分析应用大数据分析应用某市交警业务平台某市交警业务平台(用户案例进行时)业务日志分析业务日志分析大数据平台大数据平台统计分析各种业务日志,提高业务处理效率卡口数据卡口数据交通流交通流OD特征分析特征分析车管系统车管系统导入分析道路交通流 OD数据给城市综合治理与规划提供分析依据行车轨迹跟踪行车轨迹跟踪驾管系统驾管系统违法系统违法系统事故系统事故系统分析非法营运车辆的运行轨迹和出没规律,实时跟踪行车轨迹22智能交通智能交通大数据分析应用大数据分析应用案件统计分析案件统计分析(用户案例进行时)人口流动人口流动黑车特点
20、和轨迹黑车特点和轨迹交警分布管理交警分布管理智能视频和智能分析智能视频和智能分析应用应用4某市社保某市社保社保数据分析挖掘社保数据分析挖掘基于大数据分析技术的社保数据集成和分析基于大数据分析技术的社保数据集成和分析 结构图结构图数据仓库数据仓库贴源型数据贴源型数据医保库 Oracle数据抽取备份养老保险库 MS SQL数据清洗转换数据集市数据集市数据分析界面数据分析界面事业社保库 Oracle企业社保库 DB2其他关系型数据库SCFS分布式集群文件系统数据源数据源ODS数据仓库数据仓库+数据分析数据分析智能视频和智能分析智能视频和智能分析物联网应用物联网应用5某企业远程工程设备某企业远程工程设
21、备自动监测和维护管理自动监测和维护管理远程智能监视解决方案高效设备维护各种机器各种机器?机械设备使用现场机械设备使用现场(终端用户)(终端用户)设备维护服务店设备维护服务店工程?建筑设备医疗设备?定期现场巡视检查?收集工作状况?报警?日志信息做成报告书(手动)?故障巡查以及现场修理存在问题存在问题?不能随时随地进行监控不能随时随地进行监控?管理和维护工作量巨大管理和维护工作量巨大?有可能发生检查遗漏,数据记录错误有可能发生检查遗漏,数据记录错误?不能对设备故障提供先兆检知,预防预警不能对设备故障提供先兆检知,预防预警?快速障害对应和修理工作较难实现快速障害对应和修理工作较难实现?巡视检查目的性
22、弱,效率不高巡视检查目的性弱,效率不高()?维修部件维修部件?耗材的库存计划水平精度低耗材的库存计划水平精度低()本来电话可以解决的事情,结果赴现场解决本来电话可以解决的事情,结果赴现场解决远程智能监测解决方案主要功能?效果增加通讯设备,实现工作状况、部件状态监视以及告警信息的实时监控。可以应用于各行各业所使用的农业、工程、建筑机械,医疗设备或者复合机等设备。实现远程监控和维护工作的效率化。通过数据的分析和学习,可以实现故障预防,部件和耗材的合理库存掌控,及故障的先兆通知和事前预警等。远程工程监视远程工程监视快速故障维修快速故障维修零件的异常零件的异常高温!高温!远程管理远程管理工作状况工作状
23、况?部件状况可视化部件状况可视化异常检测和通知异常检测和通知预防性维护预防性维护確認洗浄交換交換?库存合理化库存合理化部件更换部件更换耗材更换耗材更换预防性维护工作计划预防性维护工作计划收集数据的分析利用收集数据的分析利用远程智能监视解决方案系统构成远程监视服务示意图远程监视服务示意图机器机器?机械的远程监视机械的远程监视?工作状况、部件状态把握工作状况、部件状态把握?降低维护成本降低维护成本?故障的先兆通知、事前预警故障的先兆通知、事前预警客户客户使用现场使用现场远程监视云服务远程监视云服务建筑建筑?工程机械工程机械各种数据各种数据2 2G/G/3 3G/G/4 4网网络络G G中心服务器中心服务器(平台)(平台)可视化可视化应用应用医疗大型设备医疗大型设备通讯终端通讯终端各种传感器各种传感器谢谢谢谢!