基于边缘智能终端的跨模态行人重识别方法及应用

作     者：卞紫阳 许廷发 马亮 李佳男 BIAN Ziyang;XU Tingfa;MA Liang;LI Jianan

作者机构：北京理工大学光电成像技术与系统教育部重点实验室北京100081 华北光电技术研究所北京100015 北京理工大学重庆创新中心重庆401120 

出 版 物：《兵工学报》 (Acta Armamentarii)

年 卷 期：2023年第44卷第9期

页      面：2631-2638页

核心收录：

学科分类：07[理学] 08[工学] 0810[工学-信息与通信工程] 0711[理学-系统科学] 080401[工学-精密仪器及机械] 081105[工学-导航、制导与控制] 0804[工学-仪器科学与技术] 080402[工学-测试计量技术及仪器] 0835[工学-软件工程] 0825[工学-航空宇航科学与技术] 0811[工学-控制科学与工程] 0812[工学-计算机科学与技术（可授工学、理学学位）] 0702[理学-物理学] 

基　　金：国家自然科学基金青年基金项目(202020429036) 

主　　题：跨模态行人重识别 数据增强 边缘智能终端 

摘      要：跨模态行人重识别技术旨在可见光、红外等不同模态图像中识别出同一个人,其在人机协同、万物互联、跨界融合、万物智能的智能系统与装备中具有重要应用。提出一种数据增强的跨模态行人重识别方法,在波长域进行数据增强的同时保留可见图像的结构信息,以弥合不同模态之间的差距。在此基础上,基于瑞芯微的RK3588芯片设计实现了一套边缘智能终端,并部署了跨模态行人重识别算法。在边缘计算部署的硬件设计、软件开发中,通过模块化的设计、层级配置的方案,实现了系统弹性可扩展,降低了数据集中处理的计算压力。实验结果表明,新方法在两个基准数据集SYSU-MM01和RegDB上取得了较好的性能,并能够在实际场景中进行应用部署。