多人三维姿态估计中的绝对和相对深度融合
作者机构:昆明理工大学信息工程与自动化学院 昆明理工大学云南省计算机技术应用重点实验室
出 版 物:《计算机辅助设计与图形学学报》 (Journal of Computer-Aided Design & Computer Graphics)
年 卷 期:2025年
核心收录:
学科分类:08[工学] 080203[工学-机械设计及理论] 0802[工学-机械工程]
基 金:国家自然科学基金(62262036, 62362043) 兴滇英才支持计划项目(KKXY202203008)
主 题:多人三维姿态估计 双根关节点 绝对根深度 根相对深度 三维姿态融合
摘 要:针对单目图像输入的多人三维姿态估计中尺度表征不精确、姿态恢复不准确和深度融合不充分的问题, 提出多人三维姿态估计中的绝对和相对深度融合方法. 首先采用人体目标检测生成多个人体实例, 表征得到双根关节点二维坐标, 并以颈部和盆骨坐标为引导, 提取绝对深度特征进行多人绝对深度估计; 然后基于扩散模型构建相对深度估计模块, 提取所有单人关节点间的相对深度信息和空间关系, 得到多个单人根相对深度和相对三维姿态; 最后结合坐标级联和透视相机模型, 对多人绝对根深度和单人根相对三维姿态进行多人三维姿态融合, 生成最终的多人三维姿态. 实验结果表明, 在Human3.6M, MuPoTs-3D数据集上, 所提方法的平均每关节误差较现有方法降低3.7%, 三维正确关节占比分别提高2.2和2.5个百分点, 能够生成精确的多人三维姿态估计结果; 在COCO数据集的定性结果, 也说明该方法具有较好的泛化性.