关节面部动作单元检测和面部对准的深层自适应注意

【文件属性】：
文件名称：关节面部动作单元检测和面部对准的深层自适应注意
文件大小：1.09MB
文件格式：PDF
更新时间：2021-03-23 19:15:05
Joint learning · facial AU 面部动作单位（AU）检测和面部对齐是两个高度相关的任务，因为面部界标可以提供精确的AU位置，以便于提取有意义的局部特征以进行AU检测。 大多数现有的AU检测工作通常将人脸对齐作为预处理并独立处理这两个任务。 在本文中，我们提出了一种用于联合AU检测和面部对齐的新颖的端到端深度学习框架，该框架以前从未探索过。 特别是，首先要学习多尺度共享特征，并将面部对齐的高级特征输入到AU检测中。 此外，为了提取精确的局部特征，我们提出了一种自适应注意力学习模块，以自适应地改进每个AU的注意力图。 最后，将组装的局部特征与面部对齐特征和全局特征集成在一起以进行AU检测。 BP4D和DISFA基准测试表明，我们的框架大大优于最新的AU检测方法。