Gaze Estimation Method Combining Facial Feature Extractor with Pyramid Squeeze Attention Mechanism

Softmax函数 凝视 人工智能 计算机科学 稳健性(进化) 特征(语言学) 模式识别(心理学) 计算机视觉 棱锥(几何) 提取器 特征提取 熵(时间箭头) 人工神经网络 数学 工程类 生物化学 化学 语言学 哲学 几何学 物理 量子力学 工艺工程 基因
作者
Jingfang Wei,Haibin Wu,Qing Wu,Yuji Iwahori,Xiaoyu Yu,Aili Wang
出处
期刊:Electronics [MDPI AG]
卷期号:12 (14): 3104-3104
标识
DOI:10.3390/electronics12143104
摘要

To address the issue of reduced gaze estimation accuracy caused by individual differences in different environments, this study proposes a novel gaze estimation algorithm based on attention mechanisms. Firstly, by constructing a facial feature extractor (FFE), the method obtains facial feature information about the eyes and locates the feature areas of the left and right eyes. Then, the L2CSNet (l2 loss + cross-entropy loss + softmax layer network), which integrates the PSA (pyramid squeeze attention), is designed to increase the correlation weights related to gaze estimation in the feature areas, suppress other irrelevant weights, and extract more fine-grained feature information to obtain gaze direction features. Finally, by integrating L2CSNet with FFE and PSA, FPSA_L2CSNet was proposed, which is fully tested on four representative publicly available datasets and a real-world dataset comprising individuals of different backgrounds, lighting conditions, nationalities, skin tones, ages, genders, and partial occlusions. The experimental results indicate that the accuracy of the gaze estimation model proposed in this paper has been improved by 13.88%, 11.43%, and 7.34%, compared with L2CSNet, FSE_L2CSNet, and FCBA_L2CSNet, respectively. This model not only improves the robustness of gaze estimation but also provides more accurate estimation results than the original model.

科研通智能强力驱动
Strongly Powered by AbleSci AI
科研通是完全免费的文献互助平台,具备全网最快的应助速度,最高的求助完成率。 对每一个文献求助,科研通都将尽心尽力,给求助人一个满意的交代。
实时播报
Joel完成签到,获得积分10
刚刚
包容溪灵完成签到,获得积分10
刚刚
我是老大应助细心的语蓉采纳,获得10
1秒前
海哥发布了新的文献求助30
1秒前
1秒前
gong9456完成签到,获得积分10
1秒前
fancyiii完成签到,获得积分10
2秒前
2秒前
Martina完成签到,获得积分10
2秒前
小何发布了新的文献求助10
2秒前
fjkssadjk发布了新的文献求助10
2秒前
鲤鱼水池完成签到,获得积分10
2秒前
guozizi发布了新的文献求助10
3秒前
杨安安完成签到,获得积分10
3秒前
了哟发布了新的文献求助10
3秒前
Joel发布了新的文献求助30
3秒前
Garden发布了新的文献求助10
4秒前
4秒前
深情安青应助gj2221423采纳,获得10
4秒前
eng关注了科研通微信公众号
4秒前
4秒前
Star-XYX完成签到,获得积分10
4秒前
tidongzhiwu完成签到,获得积分10
5秒前
Lucas应助mz采纳,获得10
5秒前
北越城主完成签到,获得积分10
5秒前
Sylvia卉完成签到,获得积分10
6秒前
Jankin发布了新的文献求助10
6秒前
liuxianjia完成签到,获得积分10
6秒前
起风了完成签到,获得积分10
6秒前
li完成签到,获得积分10
6秒前
6秒前
ruigfkl完成签到,获得积分10
7秒前
小二郎应助wu1wu1采纳,获得30
7秒前
7秒前
111给111的求助进行了留言
8秒前
丁丁发布了新的文献求助10
8秒前
FashionBoy应助123采纳,获得10
8秒前
灵巧幻嫣发布了新的文献求助10
8秒前
8秒前
Twonej应助xuan采纳,获得30
8秒前
高分求助中
(应助此贴封号)【重要!!请各用户(尤其是新用户)详细阅读】【科研通的精品贴汇总】 10000
The Cambridge History of China: Volume 4, Sui and T'ang China, 589–906 AD, Part Two 1000
The Composition and Relative Chronology of Dynasties 16 and 17 in Egypt 1000
Russian Foreign Policy: Change and Continuity 800
Real World Research, 5th Edition 800
Qualitative Data Analysis with NVivo By Jenine Beekhuyzen, Pat Bazeley · 2024 800
Superabsorbent Polymers 700
热门求助领域 (近24小时)
化学 材料科学 生物 医学 工程类 计算机科学 有机化学 物理 生物化学 纳米技术 复合材料 内科学 化学工程 人工智能 催化作用 遗传学 数学 基因 量子力学 物理化学
热门帖子
关注 科研通微信公众号,转发送积分 5710787
求助须知:如何正确求助?哪些是违规求助? 5200765
关于积分的说明 15262070
捐赠科研通 4863340
什么是DOI,文献DOI怎么找? 2610590
邀请新用户注册赠送积分活动 1560857
关于科研通互助平台的介绍 1518463