基于移动设备的三维环境重建方法研究

作     者：史素霞 

作者单位：西北农林科技大学 

学位级别：硕士

导师姓名：张建锋

授予年度：2019年

学科分类：080202[工学-机械电子工程] 08[工学] 080203[工学-机械设计及理论] 0804[工学-仪器科学与技术] 0802[工学-机械工程] 

主      题：移动设备 三维环境重建 显著区域提取 特征点提取与匹配 

摘      要：随着人类社会的进步和科学技术的提高,移动设备的普及使人们的生活越来越智能化,其方便性使得越来越多的工作将基于移动设备完成。虚拟现实、文物修复、自主移动机器人等迅速发展,使基于移动设备的三维环境重建具有重要的应用前景。基于移动设备的三维环境重建主要是通过手机相机来获取图像,经过预处理改善图像质量,再通过提取图像中显著的目标区域,尽可能地减少冗余信息的干扰以及内存的消耗;然后对目标区域进行特征点的提取与匹配,优化后得到良好的匹配集;结合相机标定,通过SFM(Structure From Motion)算法将匹配集中特征点在空间坐标系下的三维坐标恢复出来,形成物体的稀疏点云,再利用CMVS(Cluster Multi-view Stereo)算法对图像聚簇分类,最后使用PMVS(Patch-based Multi-view Stereo)算法对稀疏点云进行面片扩展获得稠密的重建模型。本文的主要研究内容有:(1)显著区域提取。图像中包含有大量的信息,如果三维重建过程中使用的图像数量过多,可能会导致程序运行时系统崩溃,为了减少内存的消耗,论文通过对图像中的显著区域进行提取,使冗余信息得到有效去除。首先将RGB颜色图转换到Lab颜色空间提取图像的颜色信息,然后利用Gabor滤波器提取图像的纹理信息,最后将颜色信息和纹理信息进行融合以实现显著区域的提取目标。实验结果表明,该方法能够达到较为理想的提取效果,得到比较满意的显著性图。(2)特征点提取与匹配。特征点是图像主要信息的表达,针对特征点提取耗时问题提出了改进的SURF算法,为了提高特征点匹配的精度提出了基于最大似然估计准则的特征匹配点提纯算法。首先通过改进的SURF算法提取图像中显著区域的特征点,然后根据欧氏最小距离进行匹配,再对匹配结果进行提纯优化。实验结果表明,特征点提取的时间成本可以缩减3倍,匹配精度可以达到90%以上。(3)三维环境重建。采用张正友标定法获取相机的内部参数,结合已经得到的匹配点集合,通过计算本质矩阵求解相机的外部参数。根据得到的内外参数就可以得到相机的投影矩阵,然后根据投影关系恢复出目标物体在三维空间的深度信息,再通过光束平差法对其进行优化便可以得到三维环境的稀疏点云模型。最后再通过CMVS聚簇分类和PMVS贴片扩展获得三维环境的稠密点云模型。通过对不同的测试集进行重建,实验结果表明均达到了预期效果。