1、高级数字图像处理联系方式联系方式n媒体计算与仿真研究室 八教403 欢迎多交流，多联系！n同学自我介绍 研究方向、导师、课题等，有图像处理基础？n关于纪律不迟到、不早退、不旷课有特殊情况，提前请假遵守课堂纪律n 课代表推荐 协助考勤、讲座报名等课程目的与要求课程目的与要求n掌握数字图像处理的概念、原理和方法n为图像相关领域的学习或研究打下良好基础n说明 属于媒体计算领域 和相关课程视觉计算、多媒体信息建模与检索互补课程安排课程安排n课程内容分为数字图像处理的理论及实践概念繁多、内容广泛、理论性和实践性很强n内容简化，选自多本教材；n课时：32学时讨论、小讲座等互动环节课堂提问、练习课外自己动手
2、编程课程考核课程考核n考核平时成绩 40%n考勤、课堂练习、回答问题n课堂小讲座、讨论考试（或论文）成绩 60%讲座安排讲座安排n围绕图像处理领域，做10分钟-20分钟PPT 技术点、知识点介绍 应用 研究现状 程序实现与演示 论文阅读 鼓励介绍自己的学术研究成果n每位同学都要讲，按团队准备和评分n课代表收集大家选题小讲座评分小讲座评分选题恰当：不宽泛，和课程内容不重复 PPT简洁：提纲式，字号至少为28，不超过50字/页，不照抄网上内容内容熟悉，陈述流畅：不要照稿子念，和大家有互动：眼神、手势、提问等有亮点：如编程实现、图文并茂、视频演示数字图像处理概述及基础参考书参考书n数字图像处理(第二
3、版)，冈萨雷斯等著，电子工业出版社,2013n章毓晋，图象工程上册图象处理，清华大学出版社,2008n章毓晋，图象工程中册图象分析，清华大学出版社,2008n章毓晋，图象工程下册图象理解，清华大学出版社,2008国内外相关国内外相关学术会议和期刊学术会议和期刊n国内期刊Journal of Computer Science and Technology (JCST)(SCI)计算机学报软件学报电子学报计算机研究与发展中国图像图形学报n国外学术会议IEEE International Conference on Computer Vision (ICCV)IEEE International C
4、onference on Computer Vision and Pattern Recognition (CVPR)ACM Multimedia Conference (MM)IEEE International Conference on Image Processing (ICIP)International Conference on Pattern Recognition (ICPR)n国外期刊IEEE Transactions on Pattern Analysis and Machine Intelligence (PAMI)IEEE Transactions on Image
5、Processing (TIP)International Journal of Computer Vision(IJCV)Pattern Recognition (PR)IEEE Transactions on Circuits and Systems for Video Technology (CSVT)图像处理的主要内容图像处理的主要内容n基础知识n图像几何变换n彩色图像处理n边缘检测n图像增强n图像分割n形态学处理n图像压缩n应用实践基础知识基础知识n1 概述概念：图像、数字图像、像素数字图像处理的起源数字图像处理的应用领域图像处理系统的基本组成结构n2 技术基础图像的采样和量化数字图
6、像的表示数字图像的质量像素间的一些基本关系1.1 1.1 图像基本概念图像基本概念n图像定义为二维函数f(x,y)，其中，x,y是空间坐标，f(x,y)是点(x,y)的幅值n灰度图像是一个二维灰度（或亮度）函数f(x,y)n彩色图像由三个（如RGB，HSV）二维灰度（或亮度）函数f(x,y)组成什么是数字图像？什么是数字图像？n像素组成的二维排列，可以用矩阵表示n单色（灰度）图像:每个像素的亮度用一个数值来表示，通常在0-255，0表示黑、255表示白，其它值表示黑白之间的灰度n彩色图像可以用红、绿、蓝三元组的二维矩阵来表示。通常三元组的每个数值也是在0到255之间，0表示相应的基色在该像素中
7、没有，而255则代表相应的基色在该像素中取得最大值数字图像的像素表示数字图像的像素表示n什么是像素？什么是像素？数字图像由二维的元素组成。每一个元素具有一个特定的位置（x,y）和幅值f(x,y),这些元素就称为像素。补充：图像补充：图像n图像Image，是对事物的一种描述形式，它以人类视觉特性为载体在空间位置记录颜色值，一个空间位置记录一个颜色值，那么空间位置及对应颜色值的集合就是图像再具体点，是指在一个二维矩形区域内的每个点记录一个颜色图像获取图像获取n通过记录现实世界，获取图像 手机 照相机 摄像机 红外摄像机 图像图像的简单分类图像的简单分类n按照人眼视觉感知范围分可见图像不可见图像n按
8、照图像空间坐标和亮度（或色彩）的连续性分类模拟图像：空间坐标和颜色值均连续取值数字图像：空间坐标和颜色值均不连续取值可见光与电磁波谱可见光与电磁波谱X射线射线紫外线紫外线射线射线红外线红外线微波微波无线电波无线电波蓝蓝绿绿红红400600500700 波长（波长（nm）人类可见波长范围人类可见波长范围可见光与电磁波谱模拟图像模拟图像n图像的空间坐标和颜色值均连续取值例如：由胶片照相机拍摄的照片n理论上，照片上的任意一点都有对应的颜色，因此坐标位置是在0宽度0高度的二维范围中取值n同样，由胶片相机拍摄的照片，其每个点的感光值也都是连续取值的，并且取值范围（也称为动态范围）非常大数字图像n图像的空
9、间坐标和颜色值均不连续取值例如，数码相机所拍摄的数字图像n空间坐标取值不连续一般在网格点位置上才记录颜色n颜色取值不连续每个网格点上的颜色取值 只有有限种选择没有颜色没有颜色1.2 1.2 数字图像处理的起源数字图像处理的起源n人类分析的需要图像在传输过程后的更好复原空间应用：图像增强、图像复原医学图像作用：通过图像增强、图像复原等技术，增强或复原模糊或损毁的图像n机器感知的需要自动字符识别OCR人脸识别指纹识别28数字图像历史追溯数字图像历史追溯n数字图像处理最早的应用之一是在报纸业1921年，Bartlane电缆图片传输系统，在伦敦和纽约之间，经横跨大西洋的海底电缆发送数字化报纸的图片。该
10、系统传送一幅图片所需时间小于3小时，而之前需要1周以上。首先对图像进行编码；然后在接收端由专用打印设备进行图片重建291921年一幅由电报打印机打印的数字图像(5个灰度级)301921年底照像复制技术应用，在电报接受终端用穿孔带还原图像图像信号两次穿越大西洋后的效果。311929年引人了编码的图片纸带来调制光束，从而改善底板感光的系统，使灰度级增加到15个等级。1.3 1.3 数字图像处理的主要研究内容数字图像处理的主要研究内容n图像增强n图像分割n图像复原n图像变换n图像压缩n图像重建n图像配准、图像融合、图像水印、数学形态学1.4 1.4 图像处理的应用领域图像处理的应用领域n数字图象处理
11、技术已应用到很多领域应用到很多领域(1)遥感图像应用遥感图像应用 农业普查、森林覆盖计算、水利工程等的客观估计计算、森林火灾监护客观反映火灾情况、面积 水体界线的确定水体界线的确定 在近红外图像上，水体呈黑色；(2)导弹制导导弹制导 图象识别技术应用于导弹的精确制导，使其精确打击目标。如：机场、桥梁等。(3)生物特征识别生物特征识别 军事、公安中的人脸、指纹、掌纹识别人脸、指纹、掌纹识别等。(4)医学应用医学应用 CT、MR1、PET、B超、DSA、血管造影、红外乳腺、显微病理、电子显微镜、远程医疗图像、皮肤图象、X射线、刀与刀脑外科等等离不开图像。Photo courtesy Philips
12、 Research (5)日常生活日常生活 数码照片管理、处理等。1.4 1.4 图像处理系统的基本组成结构图像处理系统的基本组成结构常用图像处理软件及平台常用图像处理软件及平台nWindows自带软件-画图可以画任意图形、填充颜色等，同时也可编辑图像nACDSee目前流行的数字图像处理软件，支持超过50种常见多媒体格式，拥有如去除红眼、剪切图像、锐化、浮雕特效、旋转、镜像等功能效果。nAdobe Photoshop公认的最好的通用平面美术设计软件。由Adobe公司开发设计。它完成了DTP和图像软件的结合，使设计师可在电脑上直接完成文字的录入、排版、图像处理、形象创造和分色制板的全过程。nFi
13、reworks网页制作三剑客之一，最适合与Dreamweaver共同使用，处理网页中的图片。nMATLAB是美国MathWorks公司出品的商业数学软件，用于算法开发、数据可视化、数据分析以及数值计算的高级技术计算语言和交互式环境。nVisual C+.net实现许多图像之间的变换，或者自己编写函数来画出设计好的图像。图像存储系统图像存储系统n图像文件格式体系互联网用：GIF、JPG印刷用：TIF、JPG、TAG、PCX国际标准：TIF、JPG、BMPn图像存储体系：分级存储内存存储：处理时使用硬盘存储：处理、备份时用（在线）备份存储：光盘、磁带图像文件的常用格式图像文件的常用格式nBMP位图
14、文件，是一种与硬件设备无关与硬件设备无关的图像文件格式，是Windows操作系统采用的图像文件存储格式，是Windows操作系统内交换图像数据的一种标准。nGIF原义是“图像互换格式”，是CompuServe公司制定的一种图像文件存储格式，其最初的目的是希望每个BBS使用者都能够通过GIF图像文件格式轻易存储并交换图像数据。图像文件的常用格式图像文件的常用格式nTIFF图像文件格式由Aldus公司与Microsoft公司共同开发设计的图像文件格式。nPCX图像文件格式是PC Paintbrush绘图软件内的文件格式，专门用于存储该软件所产生的图像画面数据。nJPEG图像文件格式一种有损压缩格式
15、，是最常用的图像文件格式，由国际标准化组织和国际电话电报咨询委员会制定。2 2 技术基础技术基础n图像的采样和量化n数字图像的表示n数字图像的质量n像素间的一些基本关系邻域处理方法是图像增强过程的核心。2.1 2.1 图像的采样和量化图像的采样和量化n大多数传感器的输出是连续电压波形，为了产生一幅数字图像，需要把连续的感知数据转化为数字形式n数字化包括两种处理：采样和量化采样：图像空间坐标的数字化量化：图像函数值（灰度值）的数字化图像采样图像采样n空间坐标(x,y)的数字化被称为图像采样n确定水平和垂直方向上的像素个数N、M图像的量化图像的量化n函数取值的数字化被称为图像的量化，如量化到256
16、个灰度级图像的采样与数字图像的质量图像的采样与数字图像的质量图像的采样与数字图像的质量图像的采样与数字图像的质量1024*1024512*512256*25632*32128*12864*64图像的量化与数字图像的质量图像的量化与数字图像的质量图像的采样和量化图像的采样和量化n非统一的图像采样在灰度级变化尖锐的区域，用细腻的采样，在灰度级比较平滑的区域，用粗糙的采样n非统一的图像量化在边界附近使用较少的灰度级。剩余的灰度级可用于灰度级变化比较平滑的区域避免或减少由于量化的太粗糙，在灰度级变化比较平滑的区域出现假轮廓的现象2.2 2.2 数字图像的表示数字图像的表示n二维离散亮度函数f(x,y)
17、x，y说明图像像素的空间坐标函数值f 代表了在点(x,y)处像素的灰度值n二维矩阵Am,nm,n说明图像的宽和高。矩阵元素a(i，j)的值，表示图像在第i行，第j 列的像素的灰度值；i,j表示几何位置256个层次的图像16个层次的图像64个层次的图像2.3 图像的质量图像质量指标1、层次（灰度级）对比度：是指一幅图像中灰度反差的大小对比度 =最大亮度 /最小亮度图像质量：2、对比度图像的质量：3、清晰度n人眼宏观看到的图像的清晰程度与清晰度相关的主要因素 亮度对比度尺寸大小细微层次颜色饱和度降低亮度影响清晰度因素1、亮度原图降低对比度原图影响清晰度因素2、对比度缩小尺寸原图影响清晰度因素3、尺
18、寸大小减少细微层次原图影响清晰度因素4、细微层次降低颜色饱和度原图影响清晰度因素5、颜色饱和度2.4 2.4 像素间的一些基本关系像素间的一些基本关系n相邻像素：4邻域8邻域n连通性4连通8连通n距离相邻像素相邻像素4邻域邻域n4邻域：像素p(x,y)的4个相邻的像素(x+1,y)；(x-1,y)；(x,y+1)；(x,y-1)n用N4(p)表示像素p的4邻域相邻像素相邻像素8邻域邻域n8邻域定义：像素p(x,y)的8邻域是：像素间的连通性像素间的连通性n连通性是描述区域和边界的重要概念n两个像素连通的两个必要条件是：两个像素的位置是否相邻是否相邻两个像素的灰度值是否满足特定的相似性准则满足特
19、定的相似性准则（或者是否相等）n4连通、8连通的定义像素的连通性像素的连通性4连通连通n对于具有值V的像素p和q，如果q在集合N4(p)中，则称这两个像素是4连通的像素的连通性像素的连通性8连通连通n对于具有值V的像素p和q，如果q在集合N8(p)中，则称这两个像素是8连通的像素的连通性像素的连通性距离距离n像素之间距离的定义n欧氏距离定义nD4距离（城市距离）定义nD8距离（棋盘距离）定义像素之间距离的定义像素之间距离的定义对于像素p、q和z，分别具有坐标(x,y)，(s,t)和(u,v)，如果(1)D(p,q)0(D(p,q)=0，当且仅当p=q),(2)D(p,q)=D(q,p)(3)D
20、(p,z)D(p,q)+D(q,z)则称D是距离函数或度量欧式距离定义欧式距离定义n像素p(x,y)和q(s,t)间的欧式距离定义如下：n问题：具有与(x,y)距离小于等于某个值r的像素是？D4距离（城市距离）距离（城市距离）n像素p(x,y)和q(s,t)之间的D4距离定义为：n问题：试写出以像素A为中心、3*3邻域内的D4距离值？5*5邻域呢？D4距离举例距离举例n具有与(x,y)距离小于 等于某个值r的那些像 素形成一个菱形n 例如，与点(x,y)（中 心点）D4距离小于等 于2的像素，形成右边 固定距离的轮廓n具有D4=1的像素是 (x,y)的4邻域D8距离（棋盘距离）距离（棋盘距离）
21、n像素p(x,y)和q(s,t)之间的D8距离定义为：n问题：写出以像素A为中心、3*3邻域内的D8距离值？5*5邻域？D8距离举例距离举例n具有与(x,y)距离小于 等于某个值r的那些像 素形成一个正方形n 例如，与点(x,y)（中 心点）D8距离小于等 于2的像素，形成右边 固定距离的轮廓n 具有D8=1的像素是 (x,y)的8邻域3 数字图像处理及其研究内容数字图像处理及其研究内容n图像处理：对图像进行一系列的操作，以达到特定的应用目标n模拟图像处理利用光学、照相等方法对模拟图像的处理n数字图像处理利用计算机算法对数字图像进行系列操作，以达到特定的应用目标3.1 来源n数字图像处理起源于
22、两种主要应用范围：n(1)改善人类做判断用的图像信息n(2)处理自动装置感受的景物数据图像分析图像分析图像理解图像理解狭义处理狭义处理高高低低抽抽象象程程度度高层高层低层低层中层中层语语义义数数据据量量操操作作对对象象小小大大符号符号象素象素目标目标n低层数字图像处理：对输入图像进行变换，得到一幅输出图像如对输入图像进行各种操作以改善图像的视觉效果或者对其进行压缩编码以减少所需要的存储空间和传输时间等，降低对传输通道的要求狭义的处理数字图像的分析n对图像中感兴趣的区域或目标进行检测和测量，从而建立对图像目标的描述，是一个从输入图像到数值或者符号的过程图像理解与模式识别n在图像分析的基础上，利用
23、人工智能和认知理论，研究图像中各目标的性质和它们之间的相互联系，对图像内容的含义加以理解以及对原来客观场景加以解释，从而指导和规划行动数字图像处理的特点n处理算法不依赖于精度对于一幅图像而言，数字化时不管是用4比特、8比特还是其它比特表示，只需改变计算机中程序的参数，处理方法不变。所以从原理上讲不管对多高精度的数字图像进行处理都是可能的。而在模拟图像处理中，要想使精度提高一个数量级，就必须对装置进行大幅度改进数字图像处理的特点n处理结果能准确再现不管是什么数字图像，均用数组或数组集合表示。在传送和复制图像时，只在计算机内部进行处理，这样数据就不会丢失或遭破坏，保持了完好的再现性。而在模拟图像处
24、理过程中，就会因为各种干扰因素而无法保证图像处理结果的准确再现数字图像处理的特点n通用性、灵活性强对可见图像和不可见光图像（如X光图像、热红外图像和超声波图像等），尽管这些图像生成体系中的设备规模和精度各不相同，但当把这些图像数字化后，都可同样进行处理，这就是数字处理图像的通用性利用处理软件可对图像进行各种各样的处理，如上下滚动、漫游、拼接、合成、变换、放大、缩小和各种逻辑运算等，所以灵活性很高3.2 图像处理的研究实例图像处理的研究实例n主要研究内容图像增强图像恢复图像编码图像分析模式识别图像重建图像增强(1)图像增强(2)图像增强(3)n图像增强是改善供人观看图像主观质量n主要技术：直方图
25、修正图像平滑图像锐化同态系统伪彩色技术 图像恢复(1)图像复原(2)n图像复原是寻找引起图像质量下降的原因，通过”逆向“操作，尽可能恢复图像本来面目n主要技术：复原的代数方法逆滤波最小二乘方滤波约束去卷积空间复原技术图像编码n在保真（无损）或限保真（有损）条件下对图像进行压缩n主要技术方法：PCM编码统计编码预测编码变换编码小波编码分形编码102图像分析(1)n人体染色体n形状分析图像分析(2)n对输入图像的处理，产生已知图像描述n主要技术方法：分割描绘纹理分析形状分析场景分析模式识别n计算机代替人类完成识别景物工作，就必须赋于它有近于人的视觉功能与识别能力。n对人的视觉机理至今研究得十分不够
26、，完善的视觉模型尚未建立，因而，目前用图像处理和识别技术来识别景物相对是较简单的。n相关匹配、结构匹配等是一些常用识别方法。n各种知识基的专家系统应用于识别复杂的景物，并已做出一些实用的系统图像重建(1)n利用X射线、超声波等手段取得物休的多幅来自不同角度的二维投影图（它们反映了物体内部情形），通过计算得出物体内部图像，这种技术就是投影重建。n利用明暗、运动、体视等图像信息恢复三维物体形状则是三维信息恢复重建技术。图像重建(2)数字图像处理的实例补充数字图像处理的实例补充Image Processing ExamplesnRestoration of image from Hubble Spa
27、ce Telescope(图像复原)Source:IVPL NorthWestern University,ChicagoImage Processing ExamplesnColor photo enhancement(彩色照片增强)Source:Picture Project 1.5,2005 Nicon CorporationOriginalAutomatic EnhancementImage Processing ExamplesnNoise reduction(噪声去除)Degraded ImageNoise reduction imageSource:Jungwon Lee,Sta
28、nford EE 368 class project,Spring 2000Image Processing ExamplesnSpecial Effects(特殊效果)PhotoSimulated color pencilsSimulated oil paintingSource:Feng Xiao,Stanford EE 368 class project,Spring 2000Image Processing ExamplesnPseudocolor enhancement for security screening (伪彩增强)Source:Gonzalez+Woods book,F
29、ig 6.24Image Processing ExamplesnExtraction of settlement area from an aerial image(居住区提取)Source:INRIA,Sophia-Antipoils,FranceImage Processing ExamplesnEarthquake Analysis from Space(地震分析)Source:JPL,Pasadena,QUAKEFINDER projectImage shows the ground displacement due to Landers earthquake in CA,1992I
30、mage Processing ExamplesnFace Detection(脸部识别)Source:Henry Chang,Ulises Robles,Stanford EE 368 class project,Spring 2000Image Processing ExamplesnAnother Face Detection ExampleSource:Michael Bax,Chunlei Liu and Ping Li,Stanford EE 368 class project,Spring 2003Image Processing ExamplesSource:M.Borgman
31、n,L.Meunier,Stanford EE 368 class project,Spring 2003Image Processing ExamplesSource:Yi-Wen Liu and Yu-Li Hsueh,Stanford EE 368 class project,Spring 2000nFace morphing(脸部变形)Image Processing ExamplesnHandwriting recognitionSource:Bernd Girod,Stanford EE 368 Course NotesImage Processing ExamplesnBiome
32、trics:Fingerprint recognition(指纹识别)Source:Bernd Girod,Stanford EE 368 Course NotesImage Processing ExamplesnBiometric:Iris recognition(虹膜识别)Source:J.Daugman,U.Cambridge扩扩 展展n华理媒体计算领域研究成果介绍问题讨论问题讨论n图形和图像的异同？图像与图形图像与图形n区别图形是由计算机绘制而成的,图像则是人为的用外部设备所捕捉到的外部景象 存储方式：图形存储的是画图的函数；图像存储的则是像素的位置信息和颜色信息以及灰度信息缩放：图形在进行缩放时不会失真，可以适应不同的分辨率；图像放大时会失真，可以看到整个图像是由很多像素组合而成的处理方式：图形可旋转、扭曲、拉伸、缩放等等；图像可进行对比度增强、边缘检测等等三门学科关系三门学科关系此课件下载可自行编辑修改，供参考！感谢您的支持，我们努力做得更好！
