基于双目视觉的阵列孔板的测量和定位方法研究

作     者：肖宇 

作者单位：北京交通大学 

学位级别：硕士

导师姓名：温伟刚

授予年度：2020年

学科分类：08[工学] 080203[工学-机械设计及理论] 0802[工学-机械工程] 

主      题：双目视觉 阵列孔板 图像分割 特征点提取 立体匹配 测量 定位 

摘      要：阵列孔板广泛应用于医疗、生物、化学等领域,常作为移液设备的操作对象。目前,大多通过人工或相关设备将试剂瓶或液体放入孔板,但设备大多通用性差,仅适用于某种或某几种孔板,因此实现对阵列孔板的非接触测量和定位将大大提高设备的工作效率和智能化程度。随着机器视觉在各领域的广泛实践和应用,以及深度学习技术在目标分割定位方面的较大优势,很多学者越来越倾向于使用深度学习技术结合传统图像处理技术解决实际工程应用问题。目前各视觉测量系统针对特定对象设计特定方法进行测量,无法满足对本文对象的测量需求。本文以阵列孔板为对象,从阵列孔板的区域提取、特征点提取和立体匹配方面展开研究,最终实现对阵列孔板的测量和定位。1.针对孔板区域的提取,提出了适用于本文的改进Mask RCNN方法。改进Mask RCNN以Mobile Net为backbone、以P4+P5两层特征层为FPN。基于对Mask RCNN算法的研究,结合本文分割定位的难易程度,提出改进措施,并利用自制的孔板数据集,分别对三种backbone和不同的FPN层进行实验,实验结果表明了改进的Mask RCNN能有效地提取孔板区域。2.针对阵列孔板的特征点提取,提出了优化的边缘提取和拟合的方法。首先对图像增强算法进行研究,选用SSR方法进行图像增强;然后对Canny边缘检测算法进行研究,针对其存在问题,对各部分的常用方法进行对比,分别选用双边滤波、4方向sobel算子、迭代法对Canny算法进行改进,提高其边缘提取性能;最后根据边缘拟合方法（Hough变换、最小二乘法）对直线和圆的提取效果,选用Hough变换提取直线、最小二乘法提取圆,同时提出同一边缘的多条直线检测和合并策略及冗余圆剔除策略,并通过实验验证了其可行性。3.针对阵列孔板的立体匹配,提出了改进的SGBM方法。该方法利用基于平面拟合的方法剔除孔板区域的误匹配,利用快速均值滤波自适应地填充空洞,并通过相关实验验证了改进措施在孔板区域的有效性,为阵列孔板的尺寸测量和定位奠定基础。4.利用本文提出的方法进行尺寸测量和定位实验。在尺寸测量方面,孔板长宽尺寸上精度达2mm,孔径和孔距尺寸上达0.5mm以上,验证了本文方法的可行性,基本满足工程需求。在空间定位方面,定位精度达到1.5mm左右,精度有待进一步提高。本文研究的成果,能促进双目视觉测量技术在液体工作站中的应用,同时为智能化人机协作设备的研发提供基础,促进医疗生化领域光机电一体化设备的发展。