改进的PF-AFN在虚拟试衣中的应用

作     者：韩超远 李健 王泽震 Han Chaoyuan;Li Jian;Wang Zezhen

作者机构：陕西科技大学电子信息与人工智能学院西安710000 

出 版 物：《计算机辅助设计与图形学学报》 (Journal of Computer-Aided Design & Computer Graphics)

年 卷 期：2023年第35卷第10期

页      面：1500-1509页

核心收录：

学科分类：0821[工学-纺织科学与工程] 1201[管理学-管理科学与工程(可授管理学、工学学位)] 08[工学] 080203[工学-机械设计及理论] 0805[工学-材料科学与工程（可授工学、理学学位）] 0802[工学-机械工程] 

基　　金：国家自然科学基金(61871260) 

主　　题：虚拟试衣 外观流 图像生成网络 人体解析 

摘      要：针对PF-AFN中预测外观流精度欠缺和网络泛化能力较差的问题,提出改进的虚拟试衣网络.首先,增加目标人体预测模块,通过预测目标人体解析图像解耦形状与纹理;其次,依据仿射变换的共线特性,增加共线性损失项以约束形变过程,根据外观流的特性添加距离损失,弥补PF-AFN对局部区域约束不足的缺陷;最后,将生成的人体解析图像与原输入按通道拼接作为图像生成网络的输入,使用基于ResNet的类UNet++图像生成网络得到最终的试衣图像.基于VITON数据集,与其他4种最新方法进行对比实验,实验结果表明,该方法在图像相似度评价指标SSIM,FID和LPIPS上分别比其中最优方法提升了1.2%,11.1%和5.8%,图像清晰度和多样性评价(IS)与当前最优方法相当.从整体来看,所提方法改善了原网络中存在的问题,并取得了较好的视觉效果.