-
题名基于时序性面部动作信息的驾驶员状态检测框架
被引量：2
- 1
-
-
作者
崔子岩
汪剑鸣
金光浩
-
机构
天津工业大学计算机科学与软件学院
天津工业大学电子与信息工程学院
-
出处
《计算机应用研究》
CSCD
北大核心
2019年第11期3476-3480,共5页
-
基金
国家自然科学基金资助项目(61302127,61403278)
中国博士后科学基金资助项目(2015M570228)
+2 种基金
天津市应用基础与前沿技术研究计划资助项目(15JCYBJC16600)
天津市自然科学基金资助项目(16JCYBJC42300)
天津市高等学校创新团队培养计划资助项目(TD13-5032)
-
文摘
通过网络摄像头获取驾驶员面部视频输入网络进行检测的方法主要通过分析驾驶员口型等面部表情来判断是否疲劳驾驶,但说话等很多类似的状态也被误检为疲劳。针对以上问题提出了一种基于时序性面部动作信息的检测框架,对驾驶员状态进行检测,从而提高检测准确率、降低误检率。该框架通过检测视频中的脸部轮廓,提取脸部的多种特征,形成面部动作单元;通过训练对应的LSTM网络,形成时序性的面部动作单元,根据其相关性进行多种动作单元融合,检测最终驾驶员的状态。在公共YawDD数据集上的检测结果表明,相比现有方法,该检测方法的准确率提高到了93.1%,同时大幅降低了疲劳状态的误检率。
-
关键词
异常驾驶
时序性信息
面部检测
长短期记忆网络
-
Keywords
abnormal driving
temporal information
facial action detection
LSTM network
-
分类号
TP391.41
[自动化与计算机技术—计算机应用技术]
-
-
题名面部动作单元检测方法进展与挑战
被引量：2
- 2
-
-
作者
李勇
曾加贝
刘昕
山世光
-
机构
中国科学院计算技术研究所
中国科学院大学
中科视拓(北京)科技有限公司
-
出处
《中国图象图形学报》
CSCD
北大核心
2020年第11期2293-2305,共13页
-
基金
国家重点研发计划项目(2017YFA0700804)
国家自然科学基金项目(61702481)。
-
文摘
人脸动作编码系统从人脸解剖学的角度定义了一组面部动作单元(action unit,AU),用于精确刻画人脸表情变化。每个面部动作单元描述了一组脸部肌肉运动产生的表观变化,其组合可以表达任意人脸表情。AU检测问题属于多标签分类问题,其挑战在于标注数据不足、头部姿态干扰、个体差异和不同AU的类别不均衡等。为总结近年来AU检测技术的发展,本文系统概述了2016年以来的代表性方法,根据输入数据的模态分为基于静态图像、基于动态视频以及基于其他模态的AU检测方法,并讨论在不同模态数据下为了降低数据依赖问题而引入的弱监督AU检测方法。针对静态图像,进一步介绍基于局部特征学习、AU关系建模、多任务学习以及弱监督学习的AU检测方法。针对动态视频,主要介绍基于时序特征和自监督AU特征学习的AU检测方法。最后,本文对比并总结了各代表性方法的优缺点,并在此基础上总结和讨论了面部AU检测所面临的挑战和未来发展趋势。
-
关键词
面部动作单元(AU)
静态图像面部动作单元检测
动态视频面部动作单元检测
弱监督学习
标注数据不足
-
Keywords
facial action unit(AU)
image-based AU detection
video-based AU detection
weakly-supervised learning
insufficient annotations
-
分类号
TP391
[自动化与计算机技术—计算机应用技术]
-
-
题名基于自监督的人脸面部动作单元检测
- 3
-
-
作者
范耀文
-
机构
广东工业大学自动化学院
-
出处
《科学技术创新》
2022年第5期62-65,共4页
-
文摘
为了能够更好地从无标注图像中提取和人脸信息相关的特征,从而提升面部动作单元检测的准确度,提出了基于自监督的人脸面部动作单元检测方法。该方法将vision transformer作为编码器提取视频序列中每一帧的人脸特征,并利用视频序列中自然存在的时序特性对这些特征构造三元组损失函数。同时利用每个视频中个体信息的一致性,将提取出的人脸特征解耦为个体特征和表情特征,从而为人脸面部动作单元检测等下游任务剔除掉无关的噪音,进而提升下游任务的表现性能。通过在BP4D数据集上进行的实验与其他最先进的自监督方法进行对比,本文的方法在性能上超越了已有的其他方法。
-
关键词
面部动作单元检测
自监督学习
Vision
Transformer
-
Keywords
facial action unit detection
Self-supervised learning
Vision transformer
-
分类号
TP391.41
[自动化与计算机技术—计算机应用技术]
TP183
[自动化与计算机技术—计算机科学与技术]
-
