今天在这里推荐的是清华大学博士生开源的人脸Action Unit(表情动作单元)识别的翘楚之作 AU R-CNN。
论文全名:《AU R-CNN: Encoding Expert Prior Knowledge into R-CNN for Action Unit Detection》
该识别方法创造性的将关键点landmark以及AU的专家先验知识融合到R-CNN模型里。从而在BP4D数据库的3-fold的F1 score测试标准上达到了史无前例的63.1%。超越了所有目前最新的ICCV和CVPR论文。 由于该文章发表在一个期刊Neurocomputing(IF 4.07,JCR Q1分区,CAS二区,和PR接近),因此关注度不如CVPR上大,但是纵观该文,最值得注意的是实验部分很充足,各种模块的组合和对比实验都做了,充分证明了将物体检测融合进表情动作识别这一方法的有效性。
文章:https://arxiv.org/abs/1812.05788
代码已经开源: