基于人体姿态估计的分心驾驶行为检测

作     者：尹智帅 钟恕 聂琳真 马晨 YIN Zhi-shuai;ZHONG Shu;NIE Lin-zhen;MA Chen

作者机构：武汉理工大学汽车工程学院湖北武汉430000 

出 版 物：《中国公路学报》 (China Journal of Highway and Transport)

年 卷 期：2022年第35卷第6期

页      面：312-323页

核心收录：

学科分类：082304[工学-载运工具运用工程] 08[工学] 0823[工学-交通运输工程] 

基　　金：国家重点研发计划项目(2018YFB0105203) 国家自然科学基金项目(51805388) 

主　　题：汽车工程 驾驶分心 分心驾驶行为检测 人体姿态估计 人机共驾 

摘      要：为弥补现有驾驶特征提取方法的不足,提高分心驾驶行为检测的准确性和鲁棒性,将2D/3D人体姿态估计应用于驾驶人行为检测,提出一种适用于驾驶舱环境下的驾驶特征提取方法。首先通过将2D姿态估计网络Simple Baseline和分类网络ResNet进行融合,构建基于2D姿态估计的分心驾驶行为检测模型,并在分心驾驶数据集State Farm上分析不同数据增强方法、不同超参数、不同分类网络对模型性能的影响。其次,融合3D密集姿态估计网络DensePose与分类网络ResNet,构建基于3D姿态估计的分心驾驶行为检测模型。接着,在State Farm数据集上,针对模型的实时性和泛化能力,对比分析基于原始图像和基于2D/3D姿态的分心驾驶行为检测模型。最后,针对效果更优的基于2D姿态估计的分心驾驶行为检测模型,在分心驾驶数据集State Farm上,对使用不同姿态估计算法和分类网络的分心驾驶行为检测模型做了交叉试验,对比分析4个不同检测模型的优缺点。进一步地,将基于2D姿态估计的分心驾驶行为检测模型应用于实际采集的驾驶图片,对模型的泛化能力和有效性进行了测试验证。研究结果表明:与基于原始图像的检测模型相比,基于2D和3D姿态的检测模型都能显著提高分心驾驶行为的检测准确率;基于3D姿态的检测模型在检测精度方面略优,但基于2D姿态的检测实时性更好,检测效率是基于3D姿态检测的4倍;在驾驶舱单一环境下,基于2D姿态估计的分心驾驶行为检测模型能够满足分心驾驶行为检测的需求,在分心驾驶行为检测方面具有重要应用价值。