机器视觉入门介绍

机器视觉机器视觉概述使机器具有像人一样的视觉功能，从而实现各种检测、判断、识 另IJ、测量等功能。一个典型的机器视觉系统组成包括：图像采集 单元（光源、镜头、相机、采集卡、机械平台），图像处理分析 粤元（工控主机、图像处理分析软件、图形交互界面），执行单 兀（电传单兀、机械革兀）鎮利目标电传控制系统机器视觉概述机器视觉系统通过图像采集单元将待检测目标转换成图像信号， 并传送给图像处理分析单元。图像处理分析单元的核心为图像处理分析软件，它包括图像增强 与校正、图像分割、特征提取、图像识别与理解等方面。输出目 标的质量判断、规格测量等分析结果。分析结果输岀至图像界面，或通过电传单元（PLC等）传递给机 械单元执行相应操祚，如剔除、报警等，或通过机械臂执行分拣、 抓举等动作。机器视觉优势机器视觉系统具有咼效率、咼度自动化的特点，可以实现很咼的 分辨率精度与速度。机器视觉系统与被检测对象无接触，安全可 靠。人工检测与机器视觉自动检测的主要区别有：机器视觉自动检测人工检测效率效率高效率低速度速度快速度慢精度高精度受主观影响，精度一般可靠性检测效果稳定可靠易疲劳，受情绪波动工作时间可24小时不停息工作工作时间有限信息集成方便信息集成不易信息集成成本成本不断降低，一次性投入人力和管理成本不断上升环境适合恶劣.危险环境不适合恶劣和危险环境机器视觉的应用领域识别A标准一维码、二维码的解码A光学字符识别(OCR)和确认(OCV)检测色彩和瑕疵检测零件或部件的有无检测目标位置和方向检测测量尺寸和容量检测预设标记的测量，如孔位到孔位的距离机械手引导输出空间坐标引导机械手精确定位机器视觉系统的分类智能相机基于嵌入式基于PC主流的解决方案提供商提供从单一的视觉检测到视觉系统集成的完整视觉检测方案。视觉检测方案主要包括两个方面：A硬件一一相机，控制器，光源及支架；A软件一一控制系统，图形用户界面(GUI)和图像分析算法。机器视觉主要行业协会和标准美国自动成像协会(AIA)A相机专用传输协议Camera Link标准A相机千兆网传输协议一一GigEVision标准欧洲机器视觉协会(EMVA)A相机统一控制协议GenlCam标准A相机灵敏度和成像质量评测一一EMVA1288GENCAM1288 vSEMVA Standard Compliant机器视觉发展历程（国外）发展阶段： 20世纪50年代提出机器视觉概念, 20世纪70年代真正开始发展,20世纪80年代进入发展期， 20世纪90年代发展趋于成熟，A20世纪90代后至今高速发展。关键标志： 20世纪70年代CCD图像传感器的出现是机器视觉提供了可靠清晰的图像； 20世纪80年代以来处理器、图像处理技术的飞速发展为机器视觉的高速发展提 供了基础条件； 2000年以来基于LED光源的任意光场设计使机器视觉在各种行业的应用成为可 能。机器视觉发展历程（国内）起步于20世纪80年代 20世纪90年代进入发展期，加速发展是近几年的事情。机遇与挑战并存中国正在成为世界机器视觉发展最为活跃的地区之一；中国已经成为全世界的制造中心，许多生产线已经迁至中国，许多国际 先进水平的机器视觉系统也进入了中国；|国内机器视觉企业在与国际机器视觉企业的竞争中不断得到成长。机器视觉系统组成图像获取：光源、镜头、相机、采集卡、机械平台图像处理与分析：工控主机、图像处理分析软件、图形交互界面。判决执彳亍：电传单元、机械单元图像分析决定检测结果图像获取组成：光源、镜头、相机、采集卡、机械平台(garbage In, Qar6age Out光源种类LED：寿命长/可以有各种颜色/便于做成各种复杂形状/光均 匀稳定/可以闪光；荧光灯：光场均匀/价格便宜/亮度较LED高；卤素灯：亮度特别高/通过光纤传输后可做成；氤灯：使用寿命约1000小时/亮度高，色温与日光接近。大郃分机貉视 觉照明呆用strife松计自由荧光灯毗应it反素灯區灯设计“山”价样光源光路原理照相机并不能看见物体，而是 看见从物体表面反射过来的光。镜面反射：平滑表面以对顶角 反射光线漫射反射：粗糙表面会从各个 方向漫射光线发散反射：多数表面既有纹理， 又有平滑表面，会对光线进行 发散反射照相机I（镜面光或没射光）射出照相机I光源作用和要求在机器视觉中的作用A照亮目标，提高亮度A形成有利于图像处理的效果A克服环境光照影响，保证图像稳定性A用作测量的工具或参照良好的光场设计要求A对比度明显，目标与背景的边界清晰A背景尽量淡化而且均匀，不干扰图像 处理A与颜色有关的还需要颜色真实，亮度 适中，不过曝或欠曝；照相机I对比度比较差对比度比明显 UTCdcoY光源光场构造明场：光线反射进入照相机暗场：光线反射离开照相机暗场照明光源构造光源光源构造光源使用不同照明技术对滚珠轴承产生的影响:滚珠轴承光纤坏光灯荧光环光灯漫射圆顶灯同轴照明灯 直角持续漫射灯 持续漫射灯镜头一一主要参数工业的镜头大都是多组镜片组合在一起的。计算时会忽略厚度对透镜的影响 将其等效成没有厚度的播透镜模型，即理想凸透镜。参数：焦距/视场/物距/像距/光圈/景深/分辨力/放大倍数/畸变/接口镜头主要参数分辨率：对色彩和纹理的分辨能力。畸变：镜头中心区域和四周区域的放大倍数不相同。 F1-anel 1畸变的校正一般用黑白分明的方格图像来进行，过程并不复 杂。一般如果畸变小于2%,人眼观察不到；若畸变小于CCD 的一个像素，摄像机也看不见。镜头分类CCTV镜头专业摄影镜头远心镜头CCTV镜头专业摄影镜头远心镜头价格低高分辨率低 (20L/MM)中(4(T80L/MM)高畸变咼中低1焦距选择范围广泛广泛狭窄使用灵活性高中低适合应用低精度测量/简单检测标准精度测量/定位高精度测量/纵深测量镜头远心镜头在测量系统中，物距常发生变化，从而使像高发生变化，所以测得的物体尺 寸也发生变化，即产生了测量误差；即使物距是固定的，也会因为CCD敏感表面不易精确调整在像平面上，同样 也会产生测量误差。采用远心物镜中的像方远心物镜可以消除物距变化带来的测量误差，而物方 远心物镜则可以消除CCD位置不准带来的测量误差。Telecentric Advantages Over Conventional LensesConventionalCnvMn1acil I eS1.1I clcccntric Lens相机种类：线&面、隔/逐、黑/彩、数/模、低/高、CCD/CMOS指标：象元尺寸、分辨率、靶面大小、感应曲线、动态范围、灵敏度、 速度噪声、填充因子、体积、质量、工作环境等工作模式：Free run、Trigger （多种）、长时间曝光等传输方式：GIGE, Cameralinker,模拟相机线扫描系统Sensor Page triggerJ Line trigger相机一一面阵相机Proximity sensor相机自由触发/外部触发自由触发：按照相 机自己的时钟抓怕 图像，对于运动目 标，每次在图像中 出现的位置不同。相机自由触发/外部触发相机自由触发/外部触发外部触发：按照外 部传感器给的触发 信号拍摄图像，运 动物体在图像中每 次的位置一致。相机数据接口模拟接口： CCIR/EIA, Non-Standard,RS-422/LVDSA高速，可靠性高，传输距离远，支持多相机连接。管脚定义不统一，电缆成本高。 Camera LinkA高速，高可靠性。不便于多相机连接和集中控制，电缆价格高。 IEE1394A灵活性高，成本低。传输距离短，可靠性低。 USB2.0A灵活性高，成本低。传输距离短，可靠性低，技术不成熟。 GigEVisi onA灵活性高，可扩充性强，支持远距离传输，支持多点传输，技术成熟，鲁棒性强，成本低。 USB3.0A灵活性高。传输距离短，可靠性低，技术不成熟。图像分析核心算法物体测量二维码读取瑕疵检测 空间标定图像数学和逻辑运算图像分割图像分析核心算法模板和形状匹配光学字符的识别与确认图像滤波和频率分析图像处理分析核心功能测量工具：测量两点的距离，点到线的距离，两线 之间的角度线性定位：通过检测工件边缘的相对移动确定工件 的平移和旋转模板查找：通过检测图形的相对移动确定工件的平 移和旋转 GEO查找：通过检测图形的相对移动确定工件的平 移和部件360度的旋转斑点查找：通过检测工件的有无、关联、尺寸、形 状和坐标来确定工件位置边缘工具：确定边缘的有无、数量、类别和位 置冃标物工具：确定冃标物有无、数量、类别、 尺寸和位置图形计数工具：确定图形的有无、数量和位置 GEO计数工具：在360度范围内确定冃标图形的 有无和位置条码检测工具：查找、解码和评估一维和二维 码 OCR/OCV:读取和确认光学字符圆弧工具:检测圆弧，以及圆心及其他弧形特征线段工具:检测长度，端点及其他线段特征颜色匹配:检测匹配的色调和浓度图像处理分析核心功能检查克整性形状栓越樓式比较测AL位/角度椅测文本闽读、比牧10/初持号读取行业应用饮料行业：类别和瑕疵检测良品不同品种 印刷缺口诃点O x x x还可检测出设定之初未预料到的不良品一丁日用品行业：排列顺序检测行业应用电子器件行业：电镀不良检测电子器件行业：器件污点检测行业应用幕埶行业：仪表按键位置行业应用包装彳亍业：树脂盖污点检测检测树脂盖的污点树脂盖侧面有小的污点。使用瑕疵检测工具.可以忽略阿面弧度的影响稳定地检测 污点。电子器件行业：轮廓和边缘曲线检测行业应用包装行业：罐头底部污点检测在任意发生的光泽中粘附着污点稳定检测出污点行业应用日用品行业：透明塑料瓶污点检测纺织行业：布匹瑕疵检测行业应用行业应用在任意发生的光泽中粘附着污点稳定检测出污点在任意方向条纹图像中存在异物与实时浓淡补正组合使用只抽取杂质或污点加工业：金属元件检测与内径测量包装行业：二维码读取，OCR字符识别AutoVISIOrW LOT隘 DATE OM/EO1IIIIHIIIIIIIII sSuFIl电子器件行业：接线位置检测IIhiOKRun电子器件行业：电子零部件的有无 检测、方向识别/确认0KNG刖高精密工件检测线阵相机+远心镜头+精密丝杆红成的线扫描式工业视觉检测机器视觉系统重点聚焦调合和灌装两个生产区域，先后实现了产品在线赋码、灌装线管汇自动化、储罐信息共享、调合配方系统化、灌装线自动数据采集、应用案例一一产品可追溯针对润滑油灌装生产线，实现产线一体 化管理，产品生产数据与上下游数据实 现无缝连接，实现产品在整个供应链中 的可追溯性需求。储运发货优化、中转库和经销商管理、 原料油到货管理、生产任务智能排产等 管理课题的突破，有效地提高了现场作业管理效率，具备了先进过程控制体系 的基本格局，使智能数字化管理水平进 一步提升。应用案例一一产品可追溯使用机器视觉技术进行条码读取和标签验证，具体包括读码（包括读取一维码，二维 码），OCR （光学字符识别），检测有/无，定位，测量，标签验证，OCV （光学字符 验证）等等，保证产品质量和全程可视化操作。管理者和生产人员可轻松地管理日常工作，对各类 时间能快速响应和决断，确保生产顺利进行，实现产品的全程可追溯性。ecHfaeo毗:池i应用案例视觉堆垛通过相机视野内目标比例的变化来估算目标 的高度并引导机器人的运动补偿目标的偏移, 允许机器人只借助一个普通2D相机或线激光 辅助来拾取码放堆集的目标。应用案例视觉堆垛工作原理：A利用传感器和辅助光源组成机器视觉系统，实 现对无定位工件的准确位置判断，在机器人收 到信号后，机器人装上为工件定制的专用手爪 去可靠的抓取工件，在与机床进行通讯得到上 料请求后，最终完成机床的上下料，在各种机 械加工行业中该系统应用广泛。工作流程A标定：图像坐标映射与世界坐标的映射A检测：工件有无及在图像坐标中的位置A定位：工件映射到世界坐标的位置A引导：发出指令动作应用案例一一视觉堆垛传感器安装方式：固定式机械手一体式传感器： 2D相机 2D相机+线激光优势：使生产流水线更加简单易于维护；大幅度降低工人的劳动强度;效率和柔性都 比较高。系统结构简单、安全文明、无污染，能在 各种机械加工场合进行应用，满足了高效 率、低能耗的生产要求。茴装式相机ONOFF茴装式相机2D 象撤光El象 e ” AutomaticallyXL良好:二ONOFF机器视觉系统的项目评估系统评估及选型：精度、速度、可靠性精度：为什么要达到这么高的精度？高精度意味着高代价。系统的误差 分配，系统精度、机台精度、控制传感精度，视觉部分的精度（分辨率、 图像质量、安装精度、镜头、标定方法、算法、环境等）A速度：总指标、控制部分、动作的配合及协调、通信速度、釆集速度 （硬件）、处理速度（计算机硬件、软件算法、图像质量等）A可靠性：硬件的可靠性、软件算法的可靠性及稳定性、系统设计的可靠 性等机器视觉系统的开发流程提出问题定义检测目标收集制订完整的规格列表可行性研究这个零件是如何被肉眼看到的？这个零件将如何照在其上的光的特性？将自己想成是那个零件概念设计实验室的反复实验原型机生产批量生产，先进制造机器视觉系统的开发周期需求了解/分析/确认；（前期多沟通很重要）样品准备/测试;（需要客户密切配合）系统软/硬件选型；（保证性价比最好）系统开发设计；（严格按项目管理方法进行）现场试运行/大量测试;（必不可少，需要配合）系统的局部修改和完善；（往往耗时较多）系统验收;人员培训与系统维护;