基于HALCON的机器视觉系统的研究与实现
摘要
近年来，机器视觉系统以其高效率、高可靠、低成本的特点在国外取得了广泛的应用。机器视觉系统适用于众多领域，例如工业自动化、医药业、制造业、农业等，弥补了人类视觉的很多不足。本文采用德国MVTec公司的专业机器视觉软件HALCON来开发机器视觉系统，提出了相关机器视觉实现方法，并且在机器视觉实验平台上完成了一个弹簧片检测任务。
目前关注较多的是机器视觉系统的硬件部分，而机器视觉软件部分关注较少，一个先进的机器视觉系统除了具有高性能的硬件外，还需要有高性能的软件，虽然说许多常见的开发软件例如Mircosoft的Visual Studio、NI的LabWindows\CVI 等等都可以开发机器视觉系统，但是开发周期比较长，针对性较弱，程序的复杂程度较高。而采用HALCON作为机器视觉和图像处理核心软件，不仅大大缩短了开发周期，降低了开发难度，而且可以参考HALCON提供的众多机器视觉和图像处理例程来针对具体的任务做具体开发。
文章的第一章研究了机器视觉系统的组成、应用现状和发展，并且对机器视觉软件HALCON做了概述。第二章根据相关要求，选择合适的硬件单元，设计和搭建了VS-ZM1200机器视觉实验平台。第三章研究了机器视觉中常用的一些图像处理技术，重点讨论了在弹簧片检测任务中所采用的图像处理技术和算法，如图像的增强，分割，边缘检测等。第四章研究了机器视觉软件，重点研究了HALCON，并且对在Visual C++开发环境下如何使用HALCON编写的程序做了讨论。第五章介绍了在VS-ZM1200机器视觉实验平台上，使用HALCON和Visual C++开发的一套弹簧片检测系统，该系统完成关于弹簧片的尺寸参数测量和外观参数判别的任务。
第一章：绪论
1.1机器视觉概述
人类在征服自然、改造自然和推动社会进步的过程中,为了克服自身能力、能量的局限性,发明和创造了许多机器来辅助或代替人类完成任务。这类机器,我们通常称为智能机器,它能模拟人类的功能,能感知外部世界并有效地解决人所希望解决的问题。人类感知外部世界主要是通过视觉、触觉、听觉和嗅觉等感觉器官,而视觉,是人类最重要的感觉功能。视,就是看;觉,就是感觉、感知。通过看来感知外部世界丰富多采的信息。“百闻不如一见”,这句话生动地说明了视觉对获得客观世界信息的重要性。据统计,人所感知的外界信息有80%以上是由视觉得到的[1],通过视觉,我们可以感受到物体的位置,亮度以及物体之间的相互关系等。因此,对于智能机器来说,赋予机器人类的视觉功能对发展智能机器是极其重要的,由此形成了
一门新的学科———机器视觉。
机器视觉，就是用机器（通常是数字计算机）代替人眼来做测量及判断，对图像进行自动处理并报告“图像中有什么”的过程。美国制造工程师协会（SME Society of Manufacturing Engineers）机器视觉分会和美国机器人工业协会（RIA Robotic Industries Association）的自动化视觉分会对机器视觉下的定义为：“机器视觉是通过光学的装置和非接触的传感器自动地接收和处理一个真实物体的图像，以获得所需信息或用于控制机器人运动的装置”。具体来讲，是指通过镜头将被测目标转化为图像信号，投射至影像接受器件（一般为CCD 元件）上再通过数字计算机进行分析处理。CCD是英文（Charge Coupling Device）的缩写，其中文含义为电荷耦合组件。当不同强度的光线照射在CCD表面，CCD即发生光电效应，产生对应分布的电荷量。通过模数转换即可得到对应的数字量。由于一般均采用8位模数转换，则最低强度光线（黑）到最高强度光线（白）分成256等分（0~255），专业术语称之为灰阶或灰度
随着信息时代的到来，用计算机处理各种信息的需求越来越多。多媒体信息处理技术已经成为日常生活各个领域的迫切需要，而人们就更希望能用计算机来处理视觉问题，例如利用人脸、虹膜、指纹等识别技术来处理与个人有关的一切事务。利用自动识别技术帮助盲人，利用视觉自动监控系统监视环境中发生的非常事件，如陌生人的侵入、老年人的异常行动等。在如智能交通管理系统、视频检索、用于军事目的的自动目标检测等，都需要应用机器视觉技术来解决问题。正如视觉是人类在自然环境与社会环境生存不可缺少的最重要感知器官，机器视觉技术也是信息技术中一门不可缺少的技术，因此它成为计算机学科中不可或缺的一们学科。
光源、摄像头、图像处理器、标准的控制与通讯接口，自成为一个智能图像采集与处理单元，内部程序存储器可存储图像处理算法，并能使用PC 机，利用专用组态软件编制各种算法下载到视觉传感器的程序存储器中。视觉传感器将PC 的灵活性，PLC 的可靠性、分布式网络技术结合在一起。用这样的视觉传感器和PLC 可以更容易地构成机器视觉系统
1.1.2 机器视觉应用
机器视觉被称为自动化的眼睛，在国民经济、科学研究及国防建设等领域都有着广泛的应用。视觉的最大优点是与被观测的对象无接触，因此对观测与被观测者都不会产生任何损伤，十分安全可靠，这是其他感觉方式无法比拟的。另外，视觉方式所能检测的对象十分广泛，可以说对对象是不加选择的。理论上，人眼观察不到的范围计算机视觉也可以观察。例如红外线、微波、超声波等人类就观察不到，而机器视觉则可以利用这方面的敏感器件形成红外线、微波、超声波等图像。因此可以说机器视觉扩展了人类的视觉范围。另外，人无法长时间地观察对象，计算机视觉则不知疲劳，始终如一地观测，所以机器视觉可以广泛地用于长时间恶劣的工作环境。下面列举一些已取得的应用成果[10-14]：检测技术是现代制造业的基础技术之一,是保证产品质量的关键。近年来,随着市场竞争的不断加剧,对产品质量的要求几乎近于苛刻,产品在线100%检测、控制和管理已成为企业不可缺少的技术装备,并可通过网络与制造业信息化系统连接,实现产品质量管理。随着现代制造业的发展,许多传统的检测技术已不能满足其需要,表现在:现代制造产品种类有很大的扩充,现代制造强调实时、在线、非接触检测,现代产品的制造精度大大提高;现代制造业的进步需要研究新型的产品检测技术,视觉检测技术具有非接触、速度快、精度合适、现场抗干扰能力强等突出的优点,能很好地满足现代制造业的需求,在实际中显示出广阔的应用前景。机器视觉检测系统正是适应以上要求而发展起来的一门学科。机器视觉检测系统是建立在计算机视觉研究基础上的一门新兴检测技术,可用于工业领域的很多方面,如零件检验与尺寸测量、零件的缺陷检查、零件装配、机器人的引导和零件的识别等。
在现代制造业自动化生产中,涉及到各种各样的检查、测量和零件识别应用。这类加工生产的共同特点是连续大批量生产、对尺寸精确度的要求非常高。这种带有高度重复性和智能性判断的工作一般只能靠人手工检测来完成,我们经常在一些工厂的现代化流水线后面看到数以百计甚至逾千的检测工人来执行这道工序,在给工厂增加巨大的人工成本和管理成本的同时,仍然不能保证100%的检验合格率,而当今企业之间的竞争,已经不允许哪怕是0.1%的缺陷存在。有些时候,如微小尺寸的精确快速测量,形状匹配,颜色辨识等,用人眼根本无法连续稳定地进行,其它物理量传感器也难有用武之地。以铸件而言,它的形状不规则导致难以测量,而钣金件也是千变万化。这时,计算机的快速性、可靠性、结果的可重复性,与人类视觉的高度智能化和抽象能力相结合,使机器视觉在工业检测中的应用越来越广泛。机器视觉的特点是自动化、客观、非接触和高精度,与一般意义上的图像处理系统相比,机器视觉强调的是精度和速度,以及工业现场环境下的可靠性。
机器视觉系统形式多样，在不同的场景中应用所采用摄像装置也是不同的。主要区分为，线阵和面阵两类。工业视觉大多数使用线阵系统。下面列出部分使
用线阵和面阵视觉系统的应用。
(1)纺织与服装
断纱检测;
织染检测;
布料、皮革形状检测。
(2)食品与粮食
粮食异物检测、分拣与色选;
饮料液位检测;
生产日期、保质期字符识别;
灌装线上空瓶的破损、洁净检测。
(3)特种检验
缆绳磨损与破损检测;
容器与管道探伤;
游乐设施速度检测;
危险装备的在线状态检测。
(4)包装
外观完整性检测;
条码识别;
唆头、密封性检测。
(5)机械制造
零部件外形尺寸检测;
装配完整性检测;
部件的定位与姿态识别;
零件、发动机、底盘等编号的同色凹字符识别。
(6)邮政分拣
邮政编码识别;
包裹物品检测。
(7)海关与口岸
指纹、掌纹、虹膜与人脸识别;
货物识别;
安检危险物品检测。
此外，机器视觉还广泛应用于集成电路检测、航空航天、军事国防、消防和公路交通等。
1.1.3 机器视觉的现状和发展
机器视觉自七步发展到现在，已有接近15年的历史。应该说机器视觉作为一个应用系统，其功能特点是随着工业自动化的发展而逐渐完善和发展的。
据不完全统计，目前全球整个视觉市场总量大概在70亿美元这个规模，并且按照每年8.8%的速度在增长。而在中国，由于工业自动化成都还没有达到国外的先进水平，所以机器视觉在中国的应用还处于起步阶段，但是随着制造业对自动化的需求以及对生产质量和管理水平的不断提高，中国对机器视觉的需求将会不断上升。
目前机器视觉朝着两个大方向在发展，一个是嵌入式，如传感器和智能相机，
另一个是基于PC的采集板卡和SDK的解决方案。两者不能说孰优孰劣，他们都有各自的适用场合和适用时期。
基于PC的采用板卡和SDK的产品有比较悠久的历史，它是机器视觉在作为一个产业发展之前以图像处理的概念在工业控制领域萌芽时期就存在的，一直延续到今日。她需要用户有比较好的编程基础和对现场应用有比较丰富的经验。按照国外的发展经验，这类产品加上开发费用一般价格都比较昂贵，所以一般只在一些要求高速度、高精度的场合如半导体行业等应用。
随着IC产业的发展以及图像处理算法技术的不断成熟，过去很多需要定制开发的软件应用现在都可以做成嵌入式的固定模块化产品。这类产品适用于被检测产品大多具有比较规则的形状、简单的检测项目等一类的常规应用。
目前，在很多中低端的应用场合，传感器和智能相机得到了很大的发展。因为其易于使用，容易学习，特别对于系统集成商来说，对于其快速进行系统集成项目非常有利。
然而，随着终端客户对产品从外观、内部结构、产品质量到功能的多样化等需求的不断增长，给生产制造环节提出了更高的要求，使得生产制造环节从制造到管理都必须符合新形式的需求。客户需要更多的灵活应用的产品。嵌入式系统以及基于PC的系统都在向前发展。
嵌入式系统产品在应用高速器件之后的处理速度和精度越来越高，基本上可以满足高端应用场合，这使得嵌入式产品已经可以覆盖高中低端的需求，从而不断的抢占原来基于PC的采用板卡和SDK的产品市场。
而基于PC的采用板卡和SDK的产品，其SDK也变得越来越易用和开放。他们把机器视觉的底层算法进行模块化封装，对机器视觉的处理过程进行流程化的设计，使得整个机器视觉设计犹如“搭积木”一样，在易用性和灵活性方面取得平衡，既方便非专业用户进行设计，又不会使得机器视觉只局限于某集中特定的应用。
它除了含有最一般的图像处理常用方法如滤波、图像增强等外，还还有机器视觉领域很多处理模块如尺寸测量肌酸、边缘检测、Blob分析等，同时配合系统仿真处理环境，利用这些处理模块，配合不同的行业应用面而是用相应的处理流程，是可以在很短的时间内为用户开发出性价比很高的行业解决方案。硬件方面，新的系统都整合有图像采集、图像处理、在线显示、标准的I/O包括串口、并口、鼠标键盘、网络接口等。同时还集成有与外部工业控制设备连接的数据I/O、运动控制、PLC等接口。
因为机器视觉必须与工业自动化设备配合使用，所以这些扩展接口被整合到图像处理装置里，同时配合模块化的图像处理软件，为用户提供一体化的图像解决方案，并能与外部的工业控制设备实现无缝对接。
同时，随着制造行业对管理的要求越来越高，信息管理系统在制造过程越来越重要，而机器视觉系统本质上是属于一个质量检测环节，它需要与制造环节的MES系统以及上层管理环节的ERP系统进行数据交换，故此，图像处理装置的用户二次开发应用环境和外部接口就显得更为重要。
显然，中国的工业自动化的发展较欧美日等工业发达的国家相差不少距离。在中国目前的机器视觉的产业环境中，终端用户和系统集成商都比较偏好于使用嵌入式的视觉系统如传感器和智能相机。这类系统只需要经过一段短时间的培训即可让用户应用，比较快速地解决问题。
然而随着实际应用的深入，不少用户开始觉得固定式的嵌入式应用灵活性不足，
于是，基于PC的产品依然有存在市场的合理性。
按照国外的发展经验，一般来说，嵌入式传感器类的视觉产品大多定位于中低端的应用，基于PC的这类开放式的产品因为其需要一定量的二次开发，能够灵活地适应多种需求，因此大多定位于中高端的产品应用基于PC的机器视觉系统。当然，在中国的产业发展环境，由于人力成本的差异等因素，不一定会完全按照国外的发展路线和模式。例如，在本土市场，有系统集成商采用各种低廉的产品组件可以开发出性能与嵌入式产品一致但价格较为低廉的视觉系统。
随着工业自动化应用在中国各行各业的纵深发展，按照未来产业的发展趋势，嵌入式的产品与基于PC的产品会在市场上长期并存，嵌入式的产品会集成更多的功能和更加灵活的应用，市场份额会越来越大，而基于PC的产品其开发难度也会随着软件包的易用性的不断增强而减少，其应用会在一些高速和高精度场合得到保留。
机器视觉的研究、发展和应用还远没有达到成熟的程度。机器视觉从诞生到今天才只有短短的三十多年时间，在机器视觉中承担“大脑”作用的图像分析处理、图像理解和模式识别理论和技术基础还非常不完善4[]。甚至，机器视觉的图像获取系统也存在许多局限，比如高速图像采集实现困难、价格过高，图像分辨率、灵敏度等不高，敏感元件的制造困难，视觉系统的体积较大，自适应的图像获取无法实现等。本文从这几个方面介绍机器视觉的最新发展情况：图像获取、图像处理与模式识别理论。
1，图像获取技术的最新发展
图像获取技术的发展迅猛，CCD、CMOS等固体器件已经变成成熟应用的技术。首先来看，线阵图像敏感器件，像元尺寸不断减小，阵列像元数量不断增加，像元电荷传输速率得到极大提高。如表1所示，为一种高性能线阵CCD器件的参数5[。]从中可以看到，目前的线阵器件的性能和参数发生了根本的变化，主要表现在像元数和数据率得极大提高，而且器件设计集成了新的功能，具有可编程能力，如增益调整、曝光时间选择、速率调节，以及维护等。在机器视觉中，高速器件应用的场合在不断拓展，如高速扫描图像获取，在集成电路检查、零件姿态识别、快速原型中的逆向工程、纺织、色选等，都是高速器件的用武之地在线阵器件性能提高的同时，高速面阵图像器件性能也在快速提高。某种超高速面阵CCD器件，允许的最大分辨率达1280×1024像素，最大帧率1MHz时可采集4帧图像，且像素灵敏度达1 2bits。在提高诸如分辨率、速率、灵敏度等性能的同时，也在发展一些用途和使用场合特殊的器件，如对红外敏感的或微光摄像机，对其他射线和超声波敏感的器件等。
此外，其他类型的图像获取器件的研究也展露头角，比如，光纤视觉传感器，结合其他光电技术，以及构成阵列器件已经有报道。作为图像获取装置的组成部分，嵌入式系统、DSP对图像获取起着图像采集与时序控制的作用。大量的工业图像处理系统中采用嵌入式系统或DSP，也有部分系统采用工业PC机作为主控机器，完成图像采集、处理和识别，并完成控制的功能。嵌入式系统或嵌入式微控制器（Embedded MCU）芯片技术发展迅速，主要的工业应用采用8位、16位芯片，高端应用已经采用32位芯片。在高精度的运动检测和控制领域，32位嵌入式微控制器应用报道也不鲜见。在机器视觉系统中，对嵌入式系统性能的要求比一般的工业控制、机器人控制等场合要高。如，某种32位嵌入式微控制器芯片，内嵌大容量的Flash ROM和SRAM，其主频达到700MHz，带丰富的DSP指令系统，高速并行接口、通信接口齐备，提供可视化编程，支持汇编、ANSIC以
及V isua lC++等语言编程，支持在线仿真和调试等，使得开发应用的周期大大缩短。
2.，图像处理、图像理解与模式识别理论研究及最新发展
前面已经述及，机器视觉是针对工业应用领域。但作为视觉系统，所采用的图像处理、图像理解与模式识别的基础理论和技术是相同的。数字图像处理、图像理解与模式识别，这是当今计算机视觉研究的热点。这既表明，图像处理与模式识别在现代信息技术中的重要作用，同时也说明，该研究领域仍然存在大量没有解决的研究难题。
图像的增强、图像的平滑、图像的数据编码和传输、边缘锐化、图像的分割等在不同的研究目标和应用中会采取不同的方法，也在不断出现新的研究成果，本文不述及。作为机
器视觉能否得到应用，关键在于图像的识别。图像的模式识别过程实际上可以看作是一个标记过程，即利用识别算法来辨别景物中已分割好的各个物体，给这些物体赋予特定的标记，它是机器视觉系统必须完成的一个任务。什么是模式和模式识别？广义地说，存在于时间和空间中可观察的事物，如果可以区别它们是否相同或相似，都可以称之为模式；狭义地说，模式是通过对具体的个别事物进行观测所得到的具有时间和空间分布的信息；把模式所属的类别或同一类中模式的总体称为模式类（或简称为类）。而“模式识别”则是在某些一定量度或观测基础上把待识模式划分到各自的模式类中去6[。]模式识别的方法，即数据聚类、神经网络、统计分类和结构（句法）模式识别方法。用于图像识别的方法主要分为决策理论和结构方法。决策理论方法的基础是决策函数，利用它对模式向量进行分类识别，是以定时描述（如统计纹理）为基础的；结构方法的核心是将物体分解成了模式或模式基元，而
不同的物体结构有不同的基元串（或称字符串），通过对未知物体利用给定的模式基元求出编码边界，得到字符串，再根据字符串判断它的属类。这是一种依赖于符号描述被测物体之
间关系的方法。广泛应用于统计模式识别中密度估计的方法之一是基于混合密度模型的。根据期望最大（EM）算法得到了这些模型中有效的训练过程。按照共享核函数可以得出条件密度估计的更一般的模型，类条件密度可以用一些对所有类的条件密度估计产生作用的核函数表示。提出了一个模型，该模型对经典径向基函数（RBF）网络进行了修改，其输出表示类条件密度。与其相反的是独二混合模型的万法，其中每个类的密度采用独二混合密度进行估计。提出了一个更一般的模型，共享核函数模型是这个模型的特殊情况。
在20世纪70年代，波兰学者Pawlak Z和一些波兰的逻辑学家们一起从事关于信息系统逻辑特性的研究。粗糙集理论就是在这些研究的基础上产生的。1982年，Pawlak Z发表了经典论又Rough Sets，宣告了粗糙集理论的诞生。此后，粗糙集理论引起了许多科学家、逻辑学家和计算机研究人员的兴趣，他们在粗糙集的理论和应用万面作了大量的研究工作。1991年，Pawlak Z的专著和1992年应用专集的出版，对这一段时期理论和实践工作的成果作了较好的总结，同时促进了粗糙集在各个领域的应用。此后召开的与粗糙集有关的国际会议进一步推动了粗糙集的发展。越来越多的科技人员开始了解并准备从事该领域的研究。目前，粗糙集已成为人工智能领域中一个较新的学术热点，在模式识别、机器学习、知识获取、决策分析、过程控制等许多领域得到了广泛的应用。
参考又献f71提出了一种模式识别理论的新模型，它是基于“认识”事物而
不是基于“区分”事物为目的。与传统以“最佳划分”为目标的统计模式识别相比，它更接近于人类“认识”事物的特性，故称为“仿生模式识别”。它的数学万法在于研究特征空间中同类样本的连续性(不能分裂成两个彼此不邻接的部分)特性。又中用“仿生模式识别”理论及其“高维空间复杂几何形体覆盖神经网络”识别万法，对地平面刚性目标全万位识别问题作了实验。对各种形状相像的动物及车辆模型作全万位8 800次识别，结果正确识别率为99.75，错误识别率与拒识率分别为0与0.25%。
在特征生成上，发展出许多新的技术，包括基于小波、小波包、分形的特征，以及独二分量分析。其他研究，也都取得了长足的进展，诸如关子支持向量机，变形模板匹配，线性以及非线性分类器的设计，包括贝叶斯分类器、多层感知器，决策树和RBF网络，独二于上下又的分类，包括动态规划和隐马尔科夫建模技术。
2.3 机器视觅领域应用的拓展
机器视觉的应用研究，已经拓展到几乎每个可能的工业领域。最主要的应用行业，为汽车、制药、电子与电气、制造、包装/食品/饮料、医学等。在现代工业自动化生产中，涉及到各种各样的检查、测量和零件识别应用，例如汽车零配件尺寸检查和自动装配的完整性检查、电子装配线的元件自动定位、饮料瓶盖的印刷质量检查、产品包装上的条码和字符识别等。这类应用的共同特点是连续大批量生产、对外观质量的要求非常高。这种带有高度重复性和智能性的工作，过去是靠人工检测来完成。人工执行这些工序，在给工厂增加巨大的人工成本和管理成本的同时，仍然不能保证100%的检验合格率(即“零缺陷" )0 0.1%的缺陷的存在，对企业在币场上的竞争也是极为不利的。有些时候，如微小尺寸的精确快速测量、形状匹配、颜色辨识等，用人眼根本无法连续稳定地进行。机器视觉的引入，代替传统的人工检测万法，避免了人眼的视觉疲劳。由于机器视觉系统可以快速获取大量信息，而且易于自动处理，也易于同设计信息以及加工控制信息集成，因此，在现代自动化生产过程中，机器视觉系统广泛地应用于工况监视、成品检验和质量控制等领域。机器视觉系统的特点是提高生产的柔性和自动化程度。在一些不适合人工作业的危险工作环境或人工视
觉难以满足要求的场合，常用机器视觉来替代人工视觉;同时在大批量工业生产过程中，用人工视觉检查产品质量效率低且精度不高，用机器视觉检测方法可以大大提高生产效率和生产的自动化程度。而且机器视觉易于实现信息集成，是实现计算机集成制造的基础技术，极大地提高了投放币场的产品质量，提高了生产效率。典型的线径的在线检测与控制，如被加工工件的直径测量、铜线的拉线线径测量与控制，传统的接触式测量方法存在缺陷，人工在线测量是不可能的。采用线阵CCD线径测量方法，是较早期机器视觉成功应用的例证。机器视觉的特点是自动化、客观、非接触和高精度，与一般意义上的图像处理系统相比，机器视觉强调的是精度和速度，以及工业现场环境下的可靠性。机器视觉极适用于大批量生产过程中的测量、检查和辨识。线阵CCD在连续、扫描在线测量中的应用非常具有优势，如面积测量‘”，，不仅得到的结果准确，而且实时、快捷。再如，零件装配完整性、装配尺寸精度、零件加工精度、位置/角度测量、零件识别、特性/字符识别等。在零售业界，POS的终端设备，如条码识读机，也是线阵CCD在机器视觉上的典型应用。连续流动流体测量，如，透明管道水的澄清度、异物测量，为自来水、工业污水水质测量与控制，江河污染监测;此外，如在线食用油品油质监测，为保证生产出合格的油品提供保障。
随着图像处理和模式识别理论研究的进展，采用二维图像的机器视觉系统在最近几年得到了成功应用。如指纹、掌纹、虹膜和人脸等食物特征识别的机器视觉系统，已经在机场、车
站安检、考勤、门禁认证、海关通关等场合使用;在恐怖主义威胁下，不仅对人的识别更加重视，货物运输中也逐步考虑使用更加先进的机器视觉系统，如，采用计算机断层扫描技术的货物安检和成分识别研究正在开展。
在医学诊疗过程中，病症的识别离不开机器视觉系统的使用。如，超声波、CT.磁共振、基于CCD的内窥镜等装备，在大、中型医院已经获得普遍推广。目前，国际上视觉系统的应用方兴未艾，国内，机器视觉系统也进入应用的快速发展期，主要的视觉系统采用进口，不同类型的应用，均可以采取购买成熟系统的方法。国内形成产品的视觉系统主要有，用于粮食的色选机、线径测量系统等。
1.2 HALCON概述
德国MVtec公司的图像处理软件HALCON，是世界公认具有最佳效能的机器视觉软件。它发源自学术界，有别于市面一些商用软件包。事实上，这是一套图像处理库，由一千多个各自独立的函数，以及底层的数据管理核心构成。其中包含了各类滤波、色彩分析以及几何、数学变换、形态学计算分析、校正、分类、辨识、形状搜索等等基本的几何以及图像计算功能，由于这些功能大多并非针对特定工作设计的，因此只要用得到图像处理的地方，就可以用HALCON强大的计算分析能力来完成工作。应用范围几乎没有限制，涵盖医学、遥感探测、监拎、及工业上的各类自动化检测。近年来，由于机器视觉技术的发展，这种可以”取代人眼”，对重复工作不会疲劳，精度高且稳定的特质，促进了高科技业的发展，例如电子业产量的大幅提升。而MVTec公司更是不断的与学术界合作，并且将最新的学术研究成果纳入其中，不但使自己的技术处于业界领导地位，同时也将机器视觉技术推向更高的境界。
机器视觉软件HALCON在世界范围内被广泛的使用，用户可以利用其开放式结构快速开发图像处理和机器视觉应用。
一个专业的图像处理工具不只包含一个图像处理函数库。图像处理任务的解决只是整个机器视觉解决方案的一部分，还包括处理控件和或者数据库连接等软件部分，图像获取及其照明等硬件部分。因此，图像处理系统简单易用，并且能活嵌入到开发项目中是非常重要的。Halcon充分考虑到这些方面，它有如下的特点:
1. HALCON包含了一套交互式的程序设计接口HDevelop，可在其中以HALCON 程序代码直接编写、修改、执行程序，并且可以查看计算过程中的所有变量，设计完成后，可以直接输出C/ C++，或是COM(visual basic)程序代码，嵌入到应用程序程序中。
2, HALCON不限制取像设备，可以自行挑选合适的设备。原厂己提供了4 0余种相机的驱动，即使是尚未支持的相机，除了可以透过指针(pointer)轻易的抓取影像，还可以利用HALOCN开放性的架构，自行编写DLL文件和系统连接。
3、使用HALCON有最好的投资效益。这套软件支持的操作系统除了微软的NT/XP/2000，还有Linux, Solaris7, 181X6. 5, "1'ru64 UN1X5. 1等等，当需要开发出一套系统，就可以轻易转换作业平台，以符合需求。为了加快速度，还可以
使用多处理器的计算机，所编写的程序不必更动。
4.使用HALOCN，在设计人机接口时没有特别的限制，也不需要特别的可视化组件，可以完全使用开发环境下的程序语言，例如Mircosoft Visual Studio等等，架构自己的接口，最终用户看不到开发工具，而且在执行软件的机器上，只需要很少的资源。
1.3论文主要工作及结构
本文在分析机器视觉发展和应用现状，从教学实验，工业机器视觉检测等方面的需要上进行考虑，搭建了一个机器视觉实验平台，该平台核心为机器视觉软件HALCON。该实验平台可以进行多种机器视觉相关实验的设计和研究，并在该实验平台上设计完成了一个弹簧片检测任务，本论文完成了以下主要内容
据项目要求和实验要求选择机器视觉系统的硬件，设计集成方案，组建一个实验平台。
采用德国MVTec公司的机器视觉软件HALCON作为系统软件的处理核心，降低了机器视觉任务软件设计的难度和开发周期。
针对弹簧片工件，选择相关算法，对其进行尺寸测量和合格判断。
对IC芯片表面字符进行识别
基于字符全局特征和局部特征，设计了利用多级分类器并且基于特征点特征识别字符的特征匹配法，完成大写英文字母和阿拉伯数字的混和识别。
利用上述结果对IC表面标识进行识别应用。
第二章：ZM-VS1200机器视觉实验平台硬件设计
典型的机器视觉系统从组成结构来分，可以分为个人计算机（PC）式机器视觉系统和嵌入式机器视觉系统。嵌入式机器视觉系统也称为智能相机，具有易学、易用、易维护、易安装等特点。嵌入式机器视觉使用厂家提供的软件开发工具和函数来编制需要的机器视觉系统程序，通过相机中嵌入的处理系统来执行程序判别、被检测目标的特征，并输出结果。使用嵌入式机器视觉系统可以在短时期内构建机器视觉系统，但是这类系统成本高，提供的函数也有限，同时其功能也受到限制，很难满足多种机器视觉实验和测量的需求。基于PC的机器视觉系统相对来讲较大、结构复杂，开发周期也比较长，但是可以使用的通用软件也比较多，编制其软件平台的选择性也多，本系统采用的是德国MVTec公司提供的HALCON机器视觉软件作为其核心处理程序，同时用Mircosoft Visual Studio来完成整体软件系统集成。该机器视觉平台软件算法更加灵活多样，而且能够完成功能复杂和智能化程序高的任务。
2.1系统功能及技术要求
根据目前机器视觉教学和相关项目的需求，设计一套整体的系统解决方案，考虑到能够具有以下的功能和要求：
1，高性能处理功能，可满足复杂处理过程和实时在线监测功能；
2，多路视频输入功能，多路I/O，满足多路测控任务；
3，支持USB数字相机，满足高分辨率问题的处理要求；
4，支持Mircosoft Windows XP Embedded专业嵌入式操作系统；
5，适用各种有形物体的视觉检测问题；
6，可编程内部隔离输入输出端口，更贴近工业现场；
7，固态存储，外观优美，安装方便，完全模拟工业现场的测控环境；
8，USB2.0接口，千兆以太网接口，RS232串行接口，适用联网数据采集；
2.2系统硬件组成
本文根据系统要求进行分析，选择硬件选型，包括光源，相机，图像采集卡等。并且独立设计机器视觉系统的主机部分，将其连接成一个完整机器视觉平台。该机器视觉平台如下图所示
图2-1 VS-ZM1200机器视觉实验平台
2.2.1光源
照明的主要目的是通过一定方式把光源发出的光投射到被测物体上，突出被测特征的对比度，使采集到的图像质量得到改善从而满足机器视觉软件对图像处理与分析的要求。照明方式的选择主要考虑被测物体的特性、工作距离、视场大小等因素。当前还没有任何一种照明方式可以适用于所有的机器视觉工程中，要针对每一个机器视觉工程选择合适的照明系统。表2-2是常用照明方式的特点、应用场合及其原理。
型号：UT-70-99-W
规格：外径99mm，内径70mm 光色：纯白色
具体特点：
1.没有频闪：因为LED无影冷光源为纯直流供电，无频闪，不易使眼睛产生疲劳感,
亦不会对工作区域的其他设备(如示波器)产生谐波干扰。
2.光照均匀：LED无影冷光源是360度均匀照射，在被观察物体上无虚影产生,清晰度
高。
3.超长寿命：LED无影冷光源由于发热量极低(没有辐射)、不影响观测物的质量，耗
电量小（低电压、低电流起动）平均寿命大于35000小时，远大于普通环形灯的
1500-2500小时，寿命为普通环形荧光的十倍以上。
4.消除隐患：大多数环形灯工作电压为：AC110V或AC220V，由于使用不当烧坏电源和
灯管现象屡见不鲜，LED无影冷光源使用AC100-240V开关电源，彻底消除上述隐患。
5.亮度可调：配有专用的亮度控制器（亮度控制器具有短路、过载、温度保护功能），
操作者可根据自身对亮度的适应性随意调节亮度，使之达到最为理想的舒适度，使
长时间工作的眼睛不易产生疲劳感。
6.环保安全：较荧光环形比较耐震、耐冲击不易破、废弃物可回收，没有汞污染，是
真正的环保、节能产品。
2.2.2 相机
相机是机器视觉系统中的一个关键组件，其最本质的功能就是将光信号转变成有序的电信号。选择何时的相机也是机器视觉系统设计中的重要环节，相机的选择不仅直接决定所采集的图像的分辨率、图像质量等，同时也与整个系统的运行模式直接相关。
2.3.2.1 机器视觉中相机的分类
根据不同的感光芯片可以将相机分为CCD相机和CMOS相机两种，CMOS 相机起步较晚，所摄取的画面质量也不是很好，所以主要用在图像品质要求不是很高的产品上，而工业上应用较为普遍的是CCD相机：
CCD相机：CCD称为电荷耦合器件，CCD实际只是一个把从图像半导体中出来的垫子有组织地存储起来的方法；
CMOS相机：CMOS称为“互补金属氧化物半导体“，CMOS实际上只是将晶体管放在硅块上的技术。
人眼能看到1Lux照度（满月的夜晚）一下的目标，CCD传感器通常能看到的照度范围在0.1~3Lux，是CMOS传感器感光度的3到10倍，所以目前一般CCD相机的图像质量要优于CMOS相机。
按照输出图像的格式可以分为模拟相机和数字相机：
模拟相机：模拟相机所输出信号形式为标准的模拟量视频信号，需要配专用的图像采集卡才能转换成计算机可以处理的数字信号。模拟相机一般用于电视摄像
相机成本低，在成像质量、速度、分辨率方面不如数字相机性能好。
根据图像传感器的不同相机可以分为CCD相机和CMOS相机。其中，CCD 是目前比较成熟的成像器件，已经广泛的被应用于各种成像和光学探测领域中，CCD相机也成为图像传感器的主流产品。
对于CCD相机来说，按照传感器的像素几何排列不同可分为线阵和面阵两种。面阵相机的像素几何排列是二维平面，一般为矩形;线阵相机的像素按一维直线排列。面阵相机一次可以采集到一定视野范围内的全部图像信息;线阵相机一次只能观察物体的一个条状部分，摄像头和物体必须有相对运动来完成扫描，把每次采集的图像进行拼接得到图像。线阵相机的成像质量不如面阵相机，但是线阵相机分辨率高，速度快，对于运动物体的连续检测(例如:连续运动的纸张)有着自身的优势。
相机的选择除了考虑选择黑白/彩色、数字/模拟、面陶线阵、精度、速度外，还要考虑的因素有:相机与图像采集卡之间的数据输出接口、相机与镜头之间的联接接口等。数据输出接口主要有视频制式模拟信号、CameraLink, LIDS ,IEEE1394. USB等。在系统的硬件选择时要注意相机和图像采集卡之间的接口的类型，尽量选用相同接口，如果接口不同要考虑相机和图像采集卡之间的接口转换问题;根据相机和镜头间的联接支座的螺纹的不同可以分为C接口和CS 接口。
目前工业用相机主要有CCD和CMOS两种。CMOS相机起步较晚，所摄取的画面质量也不是很好，所以主要用在图像品质要求不是很高的产品上，而工业上应用较为普遍的是CCD相机。CCD( Charge Coupled Device)是美国人Boyle 发明的一种半导体光学器件。该器件具有光电转换、信息存储和延时等功能，并且集成度高、能耗小，故一出现就在固体图像传感、信息存储和处理等方面得到广泛应用iii。在选择相机时，主要有以下几个方面的问题要考虑
(1)相机的扫描方式相机按照扫描方式可以分为面扫描和线扫描相机。顾名思义，线扫描相机是指对物体进行行扫描的相机，线扫描相机又可分为隔行扫描和逐行扫描。线扫描相机适用于以下情况①对固定的物体做一维的测量②对象物体处于运动状态;③需处理可旋转圆柱体的边缘图像濡要对象物体的高分辨率图像，而又要考虑价格因素等，其他情况下可以考虑使用面扫描相机‘“’。线扫描相机的特点是运动平稳、速度跟踪精度高、光源强度要求高。目前，线扫描相机的分辨率已经达到几千，检测速率也达到61秒甚至更高。面扫描相机一次只能拍摄一副图像。由于面扫描相机的自身局限性，使其不适于动态目标连续无遗漏的高精度检测。但是，针对其工作原理，采用以下技术:①选用祯传送或行间传送CC}②采用高速快门(电子快门}③采用单场技术;④选用高频光源等，是完全可以进行动态图像的实时采集的，完全可以满足工业在线检测的要求‘3，。
(2)相机的颜色标准相机按颜色可以分为黑白和彩色相机。其中，黑白相机比彩色相机的分辨率高，而且数据采集速度快。随着相机制造技术的不断发展，现在，彩色相机也越来越多的得到了应用。这是因为过去的彩色相机系统要由三台相机组成，这三台相机分别对应R(红色).G(绿色).B(蓝色)波长，而现在则出现了单((O彩色相机。彩色相机可以提供更强的观察和区别能力，因此在医学、生物学以及一些工业过程控制方面发挥了重要作用。
(3)相机的输出接口形式相机输出接口形式有RS422.RS644. USB. IEEE1394以及Cameralink等，在选择图像处理卡时应注意其是否支持所选用相机的输出形式。
按调焦方式分类:手动调焦、自动调焦等;
按光圈分类:手动光圈、自动光圈。
2. 4. 1镜头的基本结构
机器视觉系统中采用的镜头一般由一组透镜和光阑组成。
透镜一般分为凸透镜和凹透镜。其中，凸透镜对光线具有汇聚作用，也称为汇聚透镜或正透镜;凹透镜对光线具有发散作用，也称为发散透镜或负透镜。由于正负透镜具有相反的特性，所以镜头设计中常常将两者配合使用，以校正像差和其他各类失真。由于变焦镜头既要使镜头的焦距在较大范围内可调，又要保证将成像目标聚焦在图像传感器的光敏面上，因而变焦镜头一般由多组正、负透镜组成。
进入镜头的光束大小一般由透镜框及其它机械结构决定。通常，在镜头中设置带孔的金属薄片以限制光束的大小，称为光阑。
2. 4. 2镜头的接口
在机器视觉中，光学镜头常用的接口为C型和CS型。C型和CS型接口均是国际标
准接口，其旋合长度、制造精度、靠面尺寸及后截距(即安装基准面至像面的空气光程)
公差均应符合相关要求。
C型和CS型接口均为1英寸一32LJN英制螺纹连接口。具有CS接口的相机可以与具有C型或CS型接口的镜头连接。但C型接口镜头需加装一个接圈才能与具有CS接口的相机连接。具有C型接口的相机只能与具有C型接口的镜头连接，而不能与具有CS接口的镜头连接，否则不但不能良好聚焦，还有可能损坏图像传感器。
2. 4. 3镜头的性能指标
镜头主要有以下几个性能指标:[39]
1、焦距
焦距是光学镜头的重要参数，通常用f来表示。镜头的焦距决定了成像目标在图像传感器上图像的大小。当采用不同焦距的光学镜头对同一目标成像时，镜头的焦距越大，所得到的像也就越大;另一方面，焦距直接与镜头的视场角相关。一般短焦距镜头具有较大的视场角，长焦距镜头的视场角较小。
2、分辨率
镜头的分辨率一般用镜头对黑白相间的线条密度的分辨极限来描述，即:以单位长度内可以分辨的线条数N来表示。
3、视场角
镜头的视场角决定了图像传感器成像的空间范围，它与光学镜头的焦距有关。当CCD 器件尺寸一定时，焦距越长，其视场角越小。
4、光谱特性
光学镜头的光谱特性主要指镜头对各波段光线的透过率特性。在部分机器视觉应用系统中，要求图像的颜色应与成像目标的颜色具有较高的一致性。因此希望各波段透过光学镜头时，除总强度有一定损失外，其光谱组成并不发生改变。
影响光学镜头光谱特性的主要因素为:膜层的干涉特性和玻璃材料的吸收特性。在机器视觉系统中，为了充分利用镜头的分辨率，镜头的光谱特性应与使用条件相匹配。即:要求镜头最高分辨率的光线应与照明波长、CCD器件接受波长相匹配，并使光学镜头对该波长的光线透过率尽可能的提高。
USB相机采用的镜头为：
日本精工A VENIR CCTV LNES 16mm F1.6
型号：SE1616
手动光圈定焦镜头，适合CCD尺寸为2/3"或1/2"或1/3"的摄像机
功能特性：
焦距：16.0mm
光圈孔径：F1.6-C
接口类型：C
Φ38.0mm×26.5mm
净重：63.0g
2.2.4 主机
系统主机部分如下图所示：
系统主机由：PC板卡、硬盘、电源、可调速直流电机，电机调速器，系统开关，光源亮度调节器，转盘，光电开关组成
其中主要设备参数如下：
光电开关：
产品详细信息：
产品名称光电开关，产品介绍布线/调整方便?,在细长的机体内凝集功能，且经济型，产品类别AC/DC自由电源。分类内置放大器继电器输出使用寿命长,偏振反射型可检测发光或闪光物体，预绕线型。
应用范围：
用于半导体，电子产品包装业，汽车运输，家电药业，保健金属加工，食品等行业。
技术说明：
●检测方法/检测距离透射型5米后向反射型205，3，4米扩散反射型300 ●电流/能源消耗3，2，1.5，2W 40毫安
●供应电压24，24--240V AC 10-24 10-30 24，12--240VDC
●控制输出继电器输出：3A，250V AC 晶体管输出：100mA,48VD