+高级检索
基于双重自注意力机制的人脸图像修复
DOI:
作者:
作者单位:

作者简介:

通讯作者:

基金项目:


Face Inpainting Based on Dual Self-attention Mechanism
Author:
Affiliation:

Fund Project:

  • 摘要
  • |
  • 图/表
  • |
  • 访问统计
  • |
  • 参考文献
  • |
  • 相似文献
  • |
  • 引证文献
  • |
  • 资源附件
    摘要:

    人脸图像修复旨在修复输入人脸图像中的缺失区域,生成令人满意的高质量修复结果.然而当存在大面积缺失时,直接修复缺失人脸图像十分困难,此时修复网络的全局上下文信息感知能力是影响修复结果的关键.鉴于此,本文提出了软硬注意力相结合的双重自注意力模块.该模块通过全局相似度计算来获得软硬两种注意力特征,之后对两种注意力特征进行自适应融合,进而提高修复网络对全局上下文信息的感知能力.此外,本文进一步提出了多尺度生成对抗网络以加强对修复结果的监督,促使修复网络生成更高质量的修复结果.实验结果表明,本文方法在定量和定性评测上均优于五种先进的对比方法.

    Abstract:

    Face inpainting aims to repair the missing regions in the input face and generate satisfactory high-quality results. However, it is difficult to directly repair the incomplete face when the missing region is large, and the global context awareness ability of the inpainting network determines the quality of the inpainting results. Therefore, a dual self-attention mechanism that combines soft attention and hard attention is proposed to improve the global context awareness of the inpainting network. This module obtains soft and hard attention features by calculating the global similarity and can adaptively fuse the attention features. Besides, a multi-scale generative adversarial network is proposed to promote the inpainting network to generate more high-quality inpainting results, by strengthening the supervision of inpainting results. Experimental results demonstrate that our method is superior to five state-of-the-art comparison methods from both quantitative and qualitative experiments.

    参考文献
    相似文献
    引证文献
文章指标
  • PDF下载次数:
  • HTML阅读次数:
  • 摘要点击次数:
  • 引用次数:
引用本文

岳焕景 ,廖磊 ,杨敬钰 ?.基于双重自注意力机制的人脸图像修复[J].湖南大学学报:自然科学版,2023,(8):32~41

复制
历史
  • 收稿日期:
  • 最后修改日期:
  • 录用日期:
  • 在线发布日期: 2023-08-29
  • 出版日期:
作者稿件一经被我刊录用,如无特别声明,即视作同意授予我刊论文整体的全部复制传播的权利,包括但不限于复制权、发行权、信息网络传播权、广播权、表演权、翻译权、汇编权、改编权等著作使用权转让给我刊,我刊有权根据工作需要,允许合作的数据库、新媒体平台及其他数字平台进行数字传播和国际传播等。特此声明。
关闭