基于注意力机制的人脸漫画生成方法

作     者：梁悦 许林峰 刘黛瑶 谢晶晶 万金鹏 王世森 LIANG Yue;XU Linfeng;LIU Daiyao;XIE Jingjing;WAN Jinpeng;WANG Shisen

作者机构：电子科技大学信息与通信工程学院成都611731 

出 版 物：《中国科技论文》 (China Sciencepaper)

年 卷 期：2023年第18卷第3期

页      面：304-309,316页

学科分类：081203[工学-计算机应用技术] 08[工学] 0835[工学-软件工程] 0812[工学-计算机科学与技术（可授工学、理学学位）] 

基　　金：国家自然科学基金资助项目(62071086) 四川省科技计划项目(2021YFG0296) 

主　　题：生成对抗网络 人脸漫画 注意力机制 细节特征 多尺度鉴别器 

摘      要：在漫画生成领域,针对现有的基于生成对抗网络(generative adversarial networks,GAN)的方法无法捕获漫画和人脸之间高级对应关系的问题,提出了一个基于注意力机制的生成对抗网络模型(Attentions-based GAN)。在生成器和多尺度鉴别器上创造性地利用不同的注意力模块以保留重要的通道特征和空间特征,保证了鉴别器更准确地区分真实漫画和生成漫画,并促使生成器学习漫画域的分布。此外,构建了一个高分辨率的人脸漫画数据集,并在其上验证了本文模型的有效性。大量实验表明,本文方法生成的漫画更清晰真实,可以保留人物面部的细节并延续漫画的风格。