清晨好,您是今天最早来到科研通的研友!由于当前在线用户较少,发布求助请尽量完整的填写文献信息,科研通机器人24小时在线,伴您科研之路漫漫前行!

In search of a robust facial expressions recognition model: A large-scale visual cross-corpus study

一般化 计算机科学 人工智能 领域(数学分析) 模式识别(心理学) 语音识别 面部表情 自然语言处理 机器学习 数学 数学分析
作者
Elena Ryumina,Denis Dresvyanskiy,Alexey Karpov
出处
期刊:Neurocomputing [Elsevier]
卷期号:514: 435-450 被引量:43
标识
DOI:10.1016/j.neucom.2022.10.013
摘要

Many researchers have been seeking robust emotion recognition system for already last two decades. It would advance computer systems to a new level of interaction, providing much more natural feedback during human-computer interaction due to analysis of user affect state. However, one of the key problems in this domain is a lack of generalization ability: we observe dramatic degradation of model performance when it was trained on one corpus and evaluated on another one. Although some studies were done in this direction, visual modality still remains under-investigated. Therefore, we introduce the visual cross-corpus study conducted with the utilization of eight corpora, which differ in recording conditions, participants’ appearance characteristics, and complexity of data processing. We propose a visual-based end-to-end emotion recognition framework, which consists of the robust pre-trained backbone model and temporal sub-system in order to model temporal dependencies across many video frames. In addition, a detailed analysis of mistakes and advantages of the backbone model is provided, demonstrating its high ability of generalization. Our results show that the backbone model has achieved the accuracy of 66.4% on the AffectNet dataset, outperforming all the state-of-the-art results. Moreover, the CNN-LSTM model has demonstrated a decent efficacy on dynamic visual datasets during cross-corpus experiments, achieving comparable with state-of-the-art results. In addition, we provide backbone and CNN-LSTM models for future researchers: they can be accessed via GitHub.
最长约 10秒,即可获得该文献文件

科研通智能强力驱动
Strongly Powered by AbleSci AI
科研通是完全免费的文献互助平台,具备全网最快的应助速度,最高的求助完成率。 对每一个文献求助,科研通都将尽心尽力,给求助人一个满意的交代。
实时播报
Lucas应助科研通管家采纳,获得30
19秒前
zhangguo完成签到 ,获得积分10
23秒前
lixuebin完成签到 ,获得积分10
49秒前
1分钟前
脑洞疼应助诚心的月光采纳,获得10
1分钟前
中中中发布了新的文献求助10
1分钟前
1分钟前
1分钟前
中中中完成签到,获得积分10
1分钟前
dormraider完成签到,获得积分10
1分钟前
1分钟前
小亮发布了新的文献求助10
2分钟前
赘婿应助科研通管家采纳,获得10
2分钟前
科研通AI5应助小亮采纳,获得10
2分钟前
huanghe完成签到,获得积分10
4分钟前
qcck完成签到,获得积分10
5分钟前
bing完成签到 ,获得积分10
5分钟前
AJ完成签到 ,获得积分10
6分钟前
科研通AI2S应助科研通管家采纳,获得10
6分钟前
wwe完成签到,获得积分10
6分钟前
l老王完成签到 ,获得积分10
6分钟前
xiaofeixia完成签到 ,获得积分10
7分钟前
33应助科研通管家采纳,获得10
8分钟前
西门浩宇完成签到 ,获得积分10
8分钟前
知行者完成签到 ,获得积分10
8分钟前
9分钟前
9分钟前
wangjue完成签到,获得积分10
9分钟前
酷波er应助舒心的南珍采纳,获得10
10分钟前
骆凤灵完成签到 ,获得积分10
10分钟前
11分钟前
泽哥发布了新的文献求助10
11分钟前
脑洞疼应助泽哥采纳,获得10
11分钟前
科研通AI5应助tian采纳,获得10
12分钟前
小周同学完成签到 ,获得积分10
12分钟前
安蓝123完成签到 ,获得积分10
12分钟前
舒心胜完成签到 ,获得积分10
12分钟前
青出于蓝蔡完成签到,获得积分10
13分钟前
拓跋雨梅完成签到 ,获得积分0
13分钟前
非洲大象发布了新的文献求助10
13分钟前
高分求助中
Continuum Thermodynamics and Material Modelling 3000
Production Logging: Theoretical and Interpretive Elements 2700
Les Mantodea de Guyane Insecta, Polyneoptera 1000
Structural Load Modelling and Combination for Performance and Safety Evaluation 1000
Conference Record, IAS Annual Meeting 1977 820
電気学会論文誌D(産業応用部門誌), 141 巻, 11 号 510
Typology of Conditional Constructions 500
热门求助领域 (近24小时)
化学 材料科学 生物 医学 工程类 有机化学 生物化学 物理 纳米技术 计算机科学 内科学 化学工程 复合材料 基因 遗传学 物理化学 催化作用 量子力学 光电子学 冶金
热门帖子
关注 科研通微信公众号,转发送积分 3571303
求助须知:如何正确求助?哪些是违规求助? 3141895
关于积分的说明 9444809
捐赠科研通 2843331
什么是DOI,文献DOI怎么找? 1562828
邀请新用户注册赠送积分活动 731326
科研通“疑难数据库(出版商)”最低求助积分说明 718513