1、 计计105 105 胡思维胡思维 蒋纯志蒋纯志王翔王翔计计102 102 周李奇翰周李奇翰 指导老师指导老师 陈志华陈志华图像视频中目标对象的提取技术研究图像视频中目标对象的提取技术研究目录1 1 项目背景和意义项目背景和意义2 2 研究研究内容内容3 3 课题重点与难点课题重点与难点4 4 研究方法与思路研究方法与思路5 5 创新点创新点6 6 团队介绍与研究基础团队介绍与研究基础7 7 项目项目进度和进度和安排安排8 8 实施条件和资源实施条件和资源9 9 预期成果预期成果10 10 结合结合专业学习的计划专业学习的计划1 1 项目背景和意义项目背景和意义目标对象的提取1 1 项目背景和
2、意义项目背景和意义1 1 项目背景和意义项目背景和意义目标对象合成到新的视频中2 2 研究内容研究内容(1) 研究图像目标对象的定位与提取(2) 研究视频目标对象的定位与提取(3) 研究算法在图片视频的合成、影视特效制作等领域典型应用课题来源:2012年浙江大学CAD&CG国家重点实验室开放课题面向多源视频检索的内容分析与表示(编号:A1213)3 3 课题重点与难点课题重点与难点重点重点:图像静态特征抽取图像静态特征抽取视频动态特征抽取视频动态特征抽取运动目标检测和跟踪运动目标检测和跟踪技术难点技术难点:在被遮挡情况下的目标对象在被遮挡情况下的目标对象跟踪和提取跟踪和提取复杂背景下复杂背景下
3、运动运动目标的检测目标的检测,跟踪跟踪与提取与提取抽取图像的颜抽取图像的颜色、纹理等静色、纹理等静态特征态特征抽取动态特征,抽取动态特征,计算动态显著性计算动态显著性实现基于动实现基于动态显著性的态显著性的视频目标的视频目标的定位与分割定位与分割实现图像的实现图像的显著性目标显著性目标的检测与分的检测与分割割将图像视频目标将图像视频目标提取方法应用到提取方法应用到图片视频的合成图片视频的合成、影视特效制作、影视特效制作4.1 4.1 研究研究思路思路 4.2 4.2 研究方法研究方法将运动特征引入到动态显著性分析中将运动特征引入到动态显著性分析中,针对针对显著性提取显著性提取RCRC算法进行改
4、进算法进行改进。使用使用CAMSHIFTCAMSHIFT算法为基础跟踪目标,采用算法为基础跟踪目标,采用运动预测和目标识别来解决遮挡问题。运动预测和目标识别来解决遮挡问题。4.2 4.2 研究方法研究方法使用显著性提取目标,使用使用显著性提取目标,使用BPBP神经网神经网络完整目标,结合语义完成分割络完整目标,结合语义完成分割利用识别将丢失(如遮挡、背景干扰利用识别将丢失(如遮挡、背景干扰等)后的目标重新找回。等)后的目标重新找回。5 5 创新点创新点将颜色,纹理,朝向等信息引入到图像的显著性分析之中在RC方法中只考虑了LAB空间中的颜色信息,没有加入纹理信息,因此准备加入纹理的程度和朝向信息
5、以便更加精确的提取显著性目标 5 5 创新点创新点将运动等信息引入到视频的显著性分析之中 视频和图象的根本区别在于运动信息,研究表明,人类更倾向于关注运动目标,因此,获取准确的运动信息对于视频的显著性提取尤为重要,准备引入准确的运动信息来矫正静态图象显著性的错误。 5 5 创新点创新点结合自底向上和自顶向下的分析方法 传统的显著性提取方法通常只利用图象的底层特征,得到的结果往往与人的预期有差别,因为人类会根据自己的理解对底层特征提取的结果做加工,因此,结合自顶而下的方法对目标的边缘等高层特征进行学习分类,使算法能像人一样进行思考。6.1 6.1 团队介绍团队介绍C+,Matlab,C#,jav
6、a团队开发经验ACM经历良好的英文功底 6.2 6.2 团队研究基础团队研究基础已实现RC显著性算法,初步提取目标。 6.2 6.2 团队研究基础团队研究基础初步实现视频的视频的动态目标跟踪动态目标跟踪在遮挡情况下利用运动预测跟踪被遮挡后丢失的目标。 6.2 6.2 团队研究基础团队研究基础7 7 项目进度和安排项目进度和安排立项后第立项后第1月月第第6月月u完善详细的设计方案完善详细的设计方案 和研究路线和研究路线u实现图像的提取和分割实现图像的提取和分割立项后第立项后第7月月第第12月月u实现视频目标的提取和实现视频目标的提取和分割分割立项后第立项后第13月月第第18月月u改进算法,优化成
7、果改进算法,优化成果u撰写论文并投稿撰写论文并投稿u撰写结题报告,完成答辩撰写结题报告,完成答辩8 8 项目进展项目进展实现图片目标的提取与分割实现图片目标的提取与分割处理前处理前处理后处理后8 8 项目进展项目进展实现视频目标对象的提取与分割实现视频目标对象的提取与分割8 8 实施条件和资源实施条件和资源依托信息学院计算机技术研究所和多媒体实践依托信息学院计算机技术研究所和多媒体实践基地基地HPHP图形工作站、联想服务器集群、索尼高精度相图形工作站、联想服务器集群、索尼高精度相机、机、IBMIBM多核服务器多核服务器拥有丰富的图像视频数据拥有丰富的图像视频数据9 9 预期成果预期成果发表学术论文1篇实现并优化图像视频目标提取算法争取参加相关的大学生科技竞赛并争取获奖争取申请专利或软件著作权10 10 结合专业学习的计结合专业学习的计划划 出国深造出国深造 保研保研感谢各位专家!