Gaze Estimation Method Combining Facial Feature Extractor with Pyramid Squeeze Attention Mechanism

Softmax函数 凝视 人工智能 计算机科学 稳健性(进化) 特征(语言学) 模式识别(心理学) 计算机视觉 棱锥(几何) 提取器 特征提取 熵(时间箭头) 人工神经网络 数学 工程类 生物化学 化学 语言学 哲学 几何学 物理 量子力学 工艺工程 基因
作者
Jingfang Wei,Haibin Wu,Qing Wu,Yuji Iwahori,Xiaoyu Yu,Aili Wang
出处
期刊:Electronics [MDPI AG]
卷期号:12 (14): 3104-3104
标识
DOI:10.3390/electronics12143104
摘要

To address the issue of reduced gaze estimation accuracy caused by individual differences in different environments, this study proposes a novel gaze estimation algorithm based on attention mechanisms. Firstly, by constructing a facial feature extractor (FFE), the method obtains facial feature information about the eyes and locates the feature areas of the left and right eyes. Then, the L2CSNet (l2 loss + cross-entropy loss + softmax layer network), which integrates the PSA (pyramid squeeze attention), is designed to increase the correlation weights related to gaze estimation in the feature areas, suppress other irrelevant weights, and extract more fine-grained feature information to obtain gaze direction features. Finally, by integrating L2CSNet with FFE and PSA, FPSA_L2CSNet was proposed, which is fully tested on four representative publicly available datasets and a real-world dataset comprising individuals of different backgrounds, lighting conditions, nationalities, skin tones, ages, genders, and partial occlusions. The experimental results indicate that the accuracy of the gaze estimation model proposed in this paper has been improved by 13.88%, 11.43%, and 7.34%, compared with L2CSNet, FSE_L2CSNet, and FCBA_L2CSNet, respectively. This model not only improves the robustness of gaze estimation but also provides more accurate estimation results than the original model.

科研通智能强力驱动
Strongly Powered by AbleSci AI
科研通是完全免费的文献互助平台,具备全网最快的应助速度,最高的求助完成率。 对每一个文献求助,科研通都将尽心尽力,给求助人一个满意的交代。
实时播报
HH完成签到 ,获得积分10
2秒前
大个应助lll采纳,获得20
2秒前
量子星尘发布了新的文献求助10
8秒前
King完成签到 ,获得积分10
11秒前
11秒前
王一生完成签到,获得积分10
13秒前
lll发布了新的文献求助20
15秒前
16秒前
冷酷雪碧完成签到 ,获得积分10
17秒前
W~舞完成签到,获得积分10
21秒前
391X小king发布了新的文献求助10
22秒前
叶远望完成签到 ,获得积分10
24秒前
非凡梦完成签到,获得积分10
25秒前
量子星尘发布了新的文献求助10
25秒前
啦啦啦完成签到 ,获得积分10
25秒前
lll完成签到,获得积分10
28秒前
miracle完成签到,获得积分10
30秒前
30秒前
jctyp完成签到,获得积分10
32秒前
一行白鹭上青天完成签到 ,获得积分0
34秒前
agd122完成签到,获得积分10
37秒前
淡然的胡萝卜完成签到 ,获得积分10
43秒前
无字诉题完成签到 ,获得积分10
43秒前
yx完成签到 ,获得积分10
47秒前
qin完成签到 ,获得积分10
49秒前
Jason完成签到 ,获得积分10
56秒前
量子星尘发布了新的文献求助10
56秒前
dalei001完成签到 ,获得积分10
57秒前
机智采枫完成签到 ,获得积分10
57秒前
甜甜圈完成签到 ,获得积分10
59秒前
贪玩蓝月完成签到 ,获得积分10
1分钟前
G1997完成签到 ,获得积分10
1分钟前
酷炫的凤妖完成签到 ,获得积分10
1分钟前
飞儿完成签到 ,获得积分10
1分钟前
Baonanza完成签到,获得积分10
1分钟前
Dr.Lee完成签到 ,获得积分10
1分钟前
郦稀完成签到,获得积分10
1分钟前
咯吱咯吱Happy完成签到,获得积分10
1分钟前
jiangjiang完成签到 ,获得积分10
1分钟前
慎之完成签到 ,获得积分10
1分钟前
高分求助中
(应助此贴封号)【重要!!请各用户(尤其是新用户)详细阅读】【科研通的精品贴汇总】 10000
Encyclopedia of Reproduction Third Edition 3000
Comprehensive Methanol Science Production, Applications, and Emerging Technologies 2000
From Victimization to Aggression 1000
化妆品原料学 1000
小学科学课程与教学 500
Study and Interlaboratory Validation of Simultaneous LC-MS/MS Method for Food Allergens Using Model Processed Foods 500
热门求助领域 (近24小时)
化学 材料科学 生物 医学 工程类 计算机科学 有机化学 物理 生物化学 纳米技术 复合材料 内科学 化学工程 人工智能 催化作用 遗传学 数学 基因 量子力学 物理化学
热门帖子
关注 科研通微信公众号,转发送积分 5645069
求助须知:如何正确求助?哪些是违规求助? 4767671
关于积分的说明 15026272
捐赠科研通 4803492
什么是DOI,文献DOI怎么找? 2568332
邀请新用户注册赠送积分活动 1525697
关于科研通互助平台的介绍 1485301