1、现代检测技术现代检测技术 机器视觉测量系统机器视觉测量系统精勤求学 敦笃励志 果毅力行 忠恕任事1PPT课件课件主要内容主要内容图像传感器图像传感器 图像测量系统图像测量系统 图像处理技术图像处理技术 CCD, CMOS 照明、镜头、图像传感与采集、中央处理器照明、镜头、图像传感与采集、中央处理器 基本概念、图像增强、图像分析基本概念、图像增强、图像分析 2PPT课件图像测量系统图像测量系统 控制中枢、图像处理控制中枢、图像处理 照明照明 镜头镜头、图像传感器图像传感器图像采集图像采集 视频信号视频信号 3PPT课件照明照明 v 光源光源 v 照明技术照明技术 v 不同光源与照明技术效果举例不
2、同光源与照明技术效果举例 4PPT课件光源光源v 方向方向 直射光直射光：入射光基本：入射光基本上来自一个方向，入上来自一个方向，入射角小，被照射物体射角小，被照射物体有阴影；有阴影； 散射光散射光：入射光来自：入射光来自多个方向，不会投射多个方向，不会投射出明显阴影。出明显阴影。5PPT课件v 光谱光谱 光的组成成份，如日光由从紫外到红外的所有光谱组成。光的组成成份，如日光由从紫外到红外的所有光谱组成。 取决于光源的类型和光学滤色镜。取决于光源的类型和光学滤色镜。 可见光光谱如图所示：可见光光谱如图所示：光源光源6PPT课件光源光源v 偏振性，又称极化光偏振性，又称极化光 一般光波的震荡方向
3、是不定的，极化光的震荡方向处在一个一般光波的震荡方向是不定的，极化光的震荡方向处在一个确定的平面上。确定的平面上。 在镜面反射中保留了定向性，可以借此消除镜面反射光的影在镜面反射中保留了定向性，可以借此消除镜面反射光的影响。响。v 强度强度 光照强度会影响摄像头的曝光，光线不足会造成对比度降低，光照强度会影响摄像头的曝光，光线不足会造成对比度降低，噪声过大；噪声过大； 光线过强会造成图像饱和，能量浪费以及散热等问题。光线过强会造成图像饱和，能量浪费以及散热等问题。v 均匀性均匀性 在所有机器视觉应用中，都要求均匀的光照。照射强度会随在所有机器视觉应用中，都要求均匀的光照。照射强度会随距离和角度
4、偏离而减小，需要特别考虑。距离和角度偏离而减小，需要特别考虑。7PPT课件光源光源v 光源的种类光源的种类 按按发光器件发光器件：卤素等、荧光等、：卤素等、荧光等、LED灯、氙（灯、氙（xian）灯等；）灯等； 按按几何形状几何形状：环形、方形、穹型、长条型灯；：环形、方形、穹型、长条型灯； 按按发光特性发光特性：点光源、线光源、面光源等；：点光源、线光源、面光源等； 按按照射角度照射角度：直射、间接、掠射、同轴、平行等。：直射、间接、掠射、同轴、平行等。 LED灯灯：颜色丰富、发光效率高、响应速度快、体积小、发：颜色丰富、发光效率高、响应速度快、体积小、发热小、功耗低、发光稳定、寿命长、易于
5、组成不同形状的光热小、功耗低、发光稳定、寿命长、易于组成不同形状的光源，是重要的光源发展趋势。源，是重要的光源发展趋势。 8PPT课件照明技术照明技术v 物体的反射特性物体的反射特性 镜面式反射；漫反射镜面式反射；漫反射9PPT课件照明技术照明技术v 颜色颜色 相加色相加色：两种或三种波长组合成某种波长光的效果。：两种或三种波长组合成某种波长光的效果。 相减色相减色：反射时从光谱中去除某些波长的光。：反射时从光谱中去除某些波长的光。v 光学密度、折射率、纹理、表面方向光学密度、折射率、纹理、表面方向10PPT课件照明技术照明技术v 正向照明正向照明 镜面镜面：光线直接反射进入镜头；：光线直接反
6、射进入镜头； 离轴照明离轴照明：光源在镜头轴线侧面、避开了镜面反射；：光源在镜头轴线侧面、避开了镜面反射； 半漫射照明半漫射照明：光照较均匀，如环形光；：光照较均匀，如环形光； 漫射照明漫射照明：光线来自所有方向，镜面反射最少；：光线来自所有方向，镜面反射最少； 黑场黑场：光线与镜头视线方向垂直。：光线与镜头视线方向垂直。v 背光照明背光照明 漫射式漫射式：光源：光源+平板，背面照射；平板，背面照射； 凝聚式凝聚式：使用镜头将光线集中于一个方向；：使用镜头将光线集中于一个方向； 黑场黑场：适用于检测透明物体中的裂痕、气泡等。：适用于检测透明物体中的裂痕、气泡等。11PPT课件不同光源与照明技术
7、效果举例不同光源与照明技术效果举例 v 高角度亮场与低角度暗场高角度亮场与低角度暗场光照强、较均匀光照强、较均匀 光滑表面的文字、伤光滑表面的文字、伤痕等纹理检测痕等纹理检测 12PPT课件不同光源与照明技术效果举例不同光源与照明技术效果举例 v 从边上的黑场照明从边上的黑场照明 最适合凹凸不平表面及表面缺陷，缺点最适合凹凸不平表面及表面缺陷，缺点是阴影太大。是阴影太大。 13PPT课件不同光源与照明技术效果举例不同光源与照明技术效果举例 v 用明视野和暗视野照明对比用明视野和暗视野照明对比 14PPT课件不同光源与照明技术效果举例不同光源与照明技术效果举例 v 用碗状照明消除晕眩光用碗状照明
8、消除晕眩光 15PPT课件不同光源与照明技术效果举例不同光源与照明技术效果举例 v 用透射光检查物体的有无用透射光检查物体的有无 16PPT课件不同光源与照明技术效果举例不同光源与照明技术效果举例 v 光源的颜色差异光源的颜色差异 中心部有银色涂层的铜框架中心部有银色涂层的铜框架 17PPT课件不同光源与照明技术效果举例不同光源与照明技术效果举例 v 红外线照明红外线照明 18PPT课件不同光源与照明技术效果举例不同光源与照明技术效果举例 v 红外线照明红外线照明 19PPT课件不同光源与照明技术效果举例不同光源与照明技术效果举例 v 紫外线照明紫外线照明 20PPT课件v 偏振光照明偏振光照
9、明 不同光源与照明技术效果举例不同光源与照明技术效果举例 21PPT课件v 偏振光照明偏振光照明 不同光源与照明技术效果举例不同光源与照明技术效果举例 图镜子上灰尘指印，掠射；图镜子上油脂指图镜子上灰尘指印，掠射；图镜子上油脂指印，暗视场；图光盘上油脂指印，暗视场印，暗视场；图光盘上油脂指印，暗视场22PPT课件不同光源与照明技术效果举例不同光源与照明技术效果举例 v 偏振光照明偏振光照明 23PPT课件镜头镜头 v 镜头的视野、景深和焦距示意图镜头的视野、景深和焦距示意图24PPT课件镜头镜头 v 基本概念基本概念 成像面成像面：被测物及其背景通过镜头投影到二维图像传感器平：被测物及其背景通
10、过镜头投影到二维图像传感器平面，一般是长宽比为面，一般是长宽比为4:3的矩形；的矩形； 视野视野（Field of View，FOV）：与成像面对应的景物平面范）：与成像面对应的景物平面范围；围； 工作距离工作距离（Work Distance，WD）：被测物到物镜的距离；）：被测物到物镜的距离； 景深景深：以镜头最佳聚焦：以镜头最佳聚焦WD为中心，前后存在一个范围，在为中心，前后存在一个范围，在此范围内的物体能够清晰成像，这个范围被称为景深此范围内的物体能够清晰成像，这个范围被称为景深（Depth of View，DOV） 焦距焦距25PPT课件选择镜头的关键参数选择镜头的关键参数 v 物镜的
11、焦距物镜的焦距f f决定了物体在成像面成像的大小，焦距越长，成像越大；决定了物体在成像面成像的大小，焦距越长，成像越大； f可以短到几毫米，长达数十米；可以短到几毫米，长达数十米； 变焦距镜头可以通过调节焦距获得不同的放大倍数。变焦距镜头可以通过调节焦距获得不同的放大倍数。v 相对孔径相对孔径F=D/f（光圈）（光圈） D是镜头中光线能通过的有效圆孔直径，是镜头中光线能通过的有效圆孔直径，D越大，收集的光越大，收集的光线越多；如线越多；如f = 50mm，D = 8.9mm，则相对孔径，则相对孔径F= 8.9/50=1/5.6； 镜头上以镜头上以1/F表示光圈值表示光圈值，如，如3.4，5.6
12、，8，11，16等，光圈等，光圈每增加一档，光照度增加一倍；每增加一档，光照度增加一倍；26PPT课件v 相对孔径相对孔径F=D/f（光圈）（光圈） F越大，景深越短；光圈越小，景深越长。为了获得较大景越大，景深越短；光圈越小，景深越长。为了获得较大景深的清晰图像，可以采取加大光强，减小光圈的方法。深的清晰图像，可以采取加大光强，减小光圈的方法。v 视场角视场角 物镜的视场角决定了成像面上良好成像的空间范围。物镜的视场角决定了成像面上良好成像的空间范围。 当成像面尺寸一定时，当成像面尺寸一定时，f越长，视场角越小。反之视场角越长，视场角越小。反之视场角越大。越大。选择镜头的关键参数选择镜头的关
13、键参数 27PPT课件选择镜头选择镜头 PMAG：镜头的放大倍数：镜头的放大倍数28PPT课件选择镜头选择镜头 v 如何选择焦距如何选择焦距WD：工作距离：工作距离 Ho：视野的高度：视野的高度 Hi：相机有效成：相机有效成像面高度像面高度 PMAG：镜头的放大倍数：镜头的放大倍数 LE：镜头像平面的扩充距离：镜头像平面的扩充距离为实现聚焦像平面后移为实现聚焦像平面后移LE = Di-f = PMAG*f29PPT课件选择镜头选择镜头v 物距物距WD、放大倍数、放大倍数PMAG和焦距和焦距f的关系的关系Sensor Size(mm)HiDiPMAG=Field of View(mm)HoWDW
14、D*PMAGf=1+PMAG 利用上式可通过被测物尺寸（利用上式可通过被测物尺寸（Ho）、物距（）、物距（WD）和像平面高度（和像平面高度（Hi）计算出所需镜头的焦距）计算出所需镜头的焦距f。LE = Di-f = PMAG*f30PPT课件选择镜头选择镜头v 普通镜头选择步骤：普通镜头选择步骤： 获得物体至镜头的距离获得物体至镜头的距离WD，如果是一个范围，取中间值；，如果是一个范围，取中间值； 计算图像放大倍数计算图像放大倍数PMAG； 利用公式计算所需的焦距；利用公式计算所需的焦距； 选取与计算值最接近的标准镜头产品，并取其焦距值；选取与计算值最接近的标准镜头产品，并取其焦距值； 根据所
15、选镜头焦距重新核算镜头到物体的距离根据所选镜头焦距重新核算镜头到物体的距离WD。举例：举例：物体至镜头的距离在物体至镜头的距离在10cm30cm范围内，取范围内，取WD=20cm。设视场高度为设视场高度为6cm，传感器成像面高度为，传感器成像面高度为6.6mm，则镜头放，则镜头放大倍数为：大倍数为：PMAG=6.6mm/60mm=0.1131PPT课件计算所需镜头焦距：计算所需镜头焦距：标准镜头焦距：标准镜头焦距：8mm、12.5mm、16mm、25mm和和50mm16mm镜头的焦距最接近计算值，使用该值重新计算镜头的焦距最接近计算值，使用该值重新计算WD：镜头的扩充距离为：镜头的扩充距离为：
16、如果镜头扩充距离不够，可以通过垫圈（如果镜头扩充距离不够，可以通过垫圈（1mm或或0.5mm）调节聚）调节聚焦机构获得所需扩充距离。焦机构获得所需扩充距离。WD*PMAGf=200*0.11/ 10.1119.82mm1+PMAG1+PMAGWD=f * 16* 10.11 /0.11 16.1cmPMAGLE=f*PMAG=16mm*0.11=1.76mm选择镜头选择镜头32PPT课件镜头的分类镜头的分类 v 按镜头接口按镜头接口 CCTV（C-MOUNT）：又称：又称C接口镜头，采用接口镜头，采用螺纹式螺纹式固定方固定方式，在机器视觉中应用最广泛，具有重量轻、体积小、价格式，在机器视觉中应
17、用最广泛，具有重量轻、体积小、价格便宜、品种多等优点。便宜、品种多等优点。 CS-MOUNT是是C接口的一种变形，二者区别在于镜头的定接口的一种变形，二者区别在于镜头的定位面到图像传感器光敏面的距离不同。位面到图像传感器光敏面的距离不同。C接口相机与接口相机与CS镜头镜头连接不能获得良好聚焦，而且会损坏连接不能获得良好聚焦，而且会损坏CCD靶面。靶面。接口类型接口类型C接口接口CS接口接口镜头定位面至光敏面距离镜头定位面至光敏面距离17.5mm12.5mm是否可以连接是否可以连接C接口相机接口相机是否可以连接是否可以连接CS接口相机接口相机（需加装节圈）（需加装节圈）33PPT课件C接口镜头产
18、品接口镜头产品 1，连接，连接C-接口视觉接口视觉 传感器的螺纹传感器的螺纹 2，根据型号可选塑料，根据型号可选塑料 或金属外壳或金属外壳 3，有各种尺寸的标准型，有各种尺寸的标准型,高能型和百万像素型的镜头高能型和百万像素型的镜头4，带焦距锁定，带焦距锁定 5，可选，可选C-接口增倍镜接口增倍镜 34PPT课件 F接口接口尼康工业镜头；尼康工业镜头；V接口接口施耐德工业镜头施耐德工业镜头 35mm相机镜头相机镜头（35mm是胶片宽度）：即最常见的是胶片宽度）：即最常见的135相相机使用的镜头，采用机使用的镜头，采用卡口式卡口式固定方式，不同相机品牌的镜头固定方式，不同相机品牌的镜头规格通常不
19、一致，不具有互换性；在振动环境中会产生移动，规格通常不一致，不具有互换性；在振动环境中会产生移动，在机器视觉系统中较少采用。在机器视觉系统中较少采用。Canon Nikon 镜头的分类镜头的分类 35PPT课件v 按等效焦距按等效焦距 广角镜头广角镜头：景深大，：景深大，WD短，视角大，易出现桶形失真；短，视角大，易出现桶形失真； 长焦距镜头长焦距镜头：WD大，放大倍数大，易出现枕形失真；大，放大倍数大，易出现枕形失真； 中焦距镜头中焦距镜头：f约在约在50mm和和200mm之间，最常用镜头；之间，最常用镜头；v 按镜头所具有的功能按镜头所具有的功能 变焦距镜头变焦距镜头（自动调焦）（自动调焦
20、） 变光圈镜头变光圈镜头（自动光圈）（自动光圈） 远心镜头远心镜头：可以产生正交投影拍摄效果；：可以产生正交投影拍摄效果； 微距镜头微距镜头：拍摄微小物体，放大倍数在：拍摄微小物体，放大倍数在0.252之间。之间。 显微镜头显微镜头：成像比例大于：成像比例大于10倍。倍。 紫外镜头紫外镜头、红外镜头：红外镜头：专门针对紫外光或红外光折射特性设专门针对紫外光或红外光折射特性设计的镜头。计的镜头。镜头的分类镜头的分类 36PPT课件视频信号视频信号 v 视频信号视频信号是机器视觉系统的关键，关系到摄像机和采集卡的配是机器视觉系统的关键，关系到摄像机和采集卡的配合、视频系统的设计和调试等。合、视频系
21、统的设计和调试等。v 分为分为黑黑/白和彩色白和彩色两大类，又分为两大类，又分为模拟和数字模拟和数字视频。模拟视频分视频。模拟视频分为标准和非标准视频，数字视频包含多种数字格式。为标准和非标准视频，数字视频包含多种数字格式。v 标准视频信号的周期、时间间隔、幅度等有明确规定，又称为标准视频信号的周期、时间间隔、幅度等有明确规定，又称为闭路电视闭路电视CCTV（Closed Circuit Television）。）。v 非标准视频信号多用于工业、医学、仪器等领域的视觉系统。非标准视频信号多用于工业、医学、仪器等领域的视觉系统。黑黑/白白彩色彩色使用地区使用地区RS-170NTSC北美、日本、台
22、湾等北美、日本、台湾等CCIRPAL欧洲、中国等欧洲、中国等37PPT课件v 标准黑白视频信号标准黑白视频信号 隔行扫描隔行扫描视频信号视频信号 隔行的帧图像和奇偶场图像之间的关系隔行的帧图像和奇偶场图像之间的关系38PPT课件 包含包含灰度信号灰度信号、同步信号同步信号和和消隐信号（零电平）消隐信号（零电平），零电平的，零电平的上部是灰度图像，零电平处为全黑，零电平的下部是行、场上部是灰度图像，零电平处为全黑，零电平的下部是行、场同步信号，包括奇场和偶场的识别脉冲信息等。同步信号，包括奇场和偶场的识别脉冲信息等。视频信号视频信号 全电视信号同步信号全电视信号同步信号39PPT课件v 标准彩色
23、视频信号标准彩色视频信号 RGB彩色信号彩色信号：分辨率最高，未经压缩，灰度损失量最小；：分辨率最高，未经压缩，灰度损失量最小；需要传送需要传送RGB信号和行场同步信号。信号和行场同步信号。 YUV分量式（分量式（YCrCb）：Y是黑白全电视信号，是黑白全电视信号，UV表示色度表示色度（颜色的色调和饱和度）；图像细节主要取决于（颜色的色调和饱和度）；图像细节主要取决于Y分量，因分量，因此可以对此可以对U、V分量压缩，减少带宽。分量压缩，减少带宽。 Y = 0.299R+0.587G+0.114B U = Cr = 0.713(R-Y) , V = Cb = 0.564(B-Y) S-Video
24、（Y/C格式）格式）：为了把：为了把YUV信号进一步混合，用一个信号进一步混合，用一个4.33MHz的正弦和余弦波分别对的正弦和余弦波分别对U和和V进行幅度调制，然后叠进行幅度调制，然后叠加到一起，叠加后的信号相位和幅值中包含了色调和饱和度加到一起，叠加后的信号相位和幅值中包含了色调和饱和度信息，视频信号可以通过两根线传递。信息，视频信号可以通过两根线传递。视频信号视频信号 40PPT课件 彩色全电视信号彩色全电视信号：用一根电缆传送信号，且与黑白电视信号：用一根电缆传送信号，且与黑白电视信号兼容。兼容。Y信号是以行频为重复周期的周期信号，其频谱为离信号是以行频为重复周期的周期信号，其频谱为离
25、散谱，选择散谱，选择UV载波频率，使调制后的载波频率，使调制后的C信号频谱落在信号频谱落在Y频谱频谱的空隙内，则的空隙内，则Y和和C信号不会信号不会“互相干扰互相干扰”。 RGB、YUV、S-Video和和彩色复合视频信号彩色复合视频信号的信号形式越来的信号形式越来越紧凑，也越来越难以精确恢复到越紧凑，也越来越难以精确恢复到RGB形式，因此在条件形式，因此在条件许可的情况下，应尽量按照顺序选择高质量的信号形式。许可的情况下，应尽量按照顺序选择高质量的信号形式。视频信号视频信号 41PPT课件v 非标准视频信号非标准视频信号 非标准的时序非标准的时序：不能用标准视频采集卡和解码电路处理，大：不能
26、用标准视频采集卡和解码电路处理，大多数医疗设备和计算机多数医疗设备和计算机VGA输出都是非标准视频。输出都是非标准视频。 百万级像元的分辨率百万级像元的分辨率：CCIR标准摄像机代表分辨率为标准摄像机代表分辨率为768*576，非标准视频信号已经超过百万像素分辨率。，非标准视频信号已经超过百万像素分辨率。 逐行扫描逐行扫描：不分奇偶场，一场扫描得到一帧图像信号。隔行：不分奇偶场，一场扫描得到一帧图像信号。隔行扫描的图像只能用于观看为目的的场合，不能用于运动物体扫描的图像只能用于观看为目的的场合，不能用于运动物体的检测。的检测。视频信号视频信号 42PPT课件v 数字视频数字视频 A/D转换在摄
27、像机内部进行，转换在摄像机内部进行，集成度高，受外界干扰小，时集成度高，受外界干扰小，时钟精准。钟精准。 以以计算机标准总线信号形式计算机标准总线信号形式传输时，不需要采集卡。传输时，不需要采集卡。 常用数字视频格式标准包括：常用数字视频格式标准包括：u LVDS（低电压差分信号装置）和（低电压差分信号装置）和RS-644：传输速度大传输速度大于于400MHz；只定义了一个信号发送和接收的电气特性，；只定义了一个信号发送和接收的电气特性，没有定义传输协议、连接方式和接插件细节。没有定义传输协议、连接方式和接插件细节。u Camera link接口协议：接口协议：规范了摄像机和采集设备的连规范了
28、摄像机和采集设备的连接方式，基本传送单元是接方式，基本传送单元是LVDS。u 通用计算机接口通用计算机接口USB2.0和和FireWire (IEEE 1394)视频信号视频信号 43PPT课件图像采集卡图像采集卡 v 图像采集卡图像采集卡（Image Grabber）又称为图像卡，将传感）又称为图像卡，将传感器输出的图像视频信号器输出的图像视频信号以帧为单位以帧为单位传送到计算机进行处理、传送到计算机进行处理、存储或显示。存储或显示。黑白图像采集卡结构图黑白图像采集卡结构图 44PPT课件v 图像采集卡的重要参数图像采集卡的重要参数： 黑、白参考电平黑、白参考电平、亮度调节亮度调节、对比度调
29、节对比度调节 箝位箝位（直流恢复）：（直流恢复）：A/D参考电平恢复参考电平恢复 A/D转换精度转换精度：8位、位、9-12位位 采集速度采集速度：数据速率：数据速率=每帧总采集点数每帧总采集点数转换精度转换精度帧速率帧速率 总线结构总线结构：PCI-Experss总线。总线。图像采集卡图像采集卡 45PPT课件图像采集卡图像采集卡 v 选择图像采集卡时需要考虑以下几个问题：选择图像采集卡时需要考虑以下几个问题： 所支持的相机类型：所支持的相机类型：相机有面扫描和线扫描之分，输出形式相机有面扫描和线扫描之分，输出形式有有RS422、RS644、IEEE1394以及以及Camera link等，
30、图像等，图像可能是可能是8、10、12、14、16、24和和32位黑白或彩色图像。位黑白或彩色图像。 数字数字I/O口：口：当采用多相机方案时，要考虑多路视频信号的当采用多相机方案时，要考虑多路视频信号的同步性，要求图像采集卡支持多路输入输出。同步性，要求图像采集卡支持多路输入输出。 数据流量：数据流量：瞬间数据流量太大就可能导致数据的丢失，为了瞬间数据流量太大就可能导致数据的丢失，为了解决这个问题，图像采集卡上应该有数据缓存。解决这个问题，图像采集卡上应该有数据缓存。46PPT课件汽车伞齿轮缺陷检测系统汽车伞齿轮缺陷检测系统 47PPT课件汽车伞齿轮缺陷检测系统汽车伞齿轮缺陷检测系统 48PPT课件作业作业 1 一个典型的机器视觉图像测量系统包括哪些环节？一个典型的机器视觉图像测量系统包括哪些环节？ 2 为了得到更适合于测量目的的图像，可以选取哪些种类的为了得到更适合于测量目的的图像，可以选取哪些种类的光源？光源的投射方式分别有哪些？光源？光源的投射方式分别有哪些？ 3 电视信号的扫描方式是什么？它可以用于机器视觉中运动电视信号的扫描方式是什么？它可以用于机器视觉中运动目标的检测么？为什么？目标的检测么？为什么？49PPT课件50PPT课件课件
