亲爱的研友该休息了!由于当前在线用户较少,发布求助请尽量完整的填写文献信息,科研通机器人24小时在线,伴您度过漫漫科研夜!身体可是革命的本钱,早点休息,好梦!

Toward Super-Resolution for Appearance-Based Gaze Estimation

凝视 计算机科学 人工智能 计算机视觉 眼动 跟踪(教育) 透视图(图形) 任务(项目管理) 机器学习 工程类 心理学 教育学 系统工程
作者
Galen O’Shea,Majid Komeili
出处
期刊:Cornell University - arXiv
标识
DOI:10.48550/arxiv.2303.10151
摘要

Gaze tracking is a valuable tool with a broad range of applications in various fields, including medicine, psychology, virtual reality, marketing, and safety. Therefore, it is essential to have gaze tracking software that is cost-efficient and high-performing. Accurately predicting gaze remains a difficult task, particularly in real-world situations where images are affected by motion blur, video compression, and noise. Super-resolution has been shown to improve image quality from a visual perspective. This work examines the usefulness of super-resolution for improving appearance-based gaze tracking. We show that not all SR models preserve the gaze direction. We propose a two-step framework based on SwinIR super-resolution model. The proposed method consistently outperforms the state-of-the-art, particularly in scenarios involving low-resolution or degraded images. Furthermore, we examine the use of super-resolution through the lens of self-supervised learning for gaze prediction. Self-supervised learning aims to learn from unlabelled data to reduce the amount of required labeled data for downstream tasks. We propose a novel architecture called SuperVision by fusing an SR backbone network to a ResNet18 (with some skip connections). The proposed SuperVision method uses 5x less labeled data and yet outperforms, by 15%, the state-of-the-art method of GazeTR which uses 100% of training data.
最长约 10秒,即可获得该文献文件

科研通智能强力驱动
Strongly Powered by AbleSci AI
更新
大幅提高文件上传限制,最高150M (2024-4-1)

科研通是完全免费的文献互助平台,具备全网最快的应助速度,最高的求助完成率。 对每一个文献求助,科研通都将尽心尽力,给求助人一个满意的交代。
实时播报
慕青应助tangyuan采纳,获得10
44秒前
44秒前
54秒前
tangyuan发布了新的文献求助10
58秒前
kokocrl完成签到,获得积分10
1分钟前
棉花糖猫弦完成签到 ,获得积分0
1分钟前
科研通AI2S应助tangyuan采纳,获得30
2分钟前
2分钟前
2分钟前
大个应助十三采纳,获得10
2分钟前
3分钟前
nevillmissy完成签到 ,获得积分20
3分钟前
3分钟前
3分钟前
4分钟前
十三发布了新的文献求助10
4分钟前
4分钟前
十三完成签到,获得积分10
4分钟前
微笑的傲易完成签到,获得积分10
4分钟前
爱静静完成签到,获得积分0
4分钟前
lqmentu完成签到,获得积分10
5分钟前
英姑应助JUST采纳,获得10
5分钟前
5分钟前
JUST发布了新的文献求助10
5分钟前
NexusExplorer应助Joker采纳,获得10
6分钟前
CodeCraft应助陈媛采纳,获得10
6分钟前
7分钟前
Joker发布了新的文献求助10
7分钟前
7分钟前
7分钟前
7分钟前
7分钟前
LouieHuang发布了新的文献求助10
7分钟前
7分钟前
7分钟前
7分钟前
7分钟前
LouieHuang发布了新的文献求助10
7分钟前
LouieHuang发布了新的文献求助10
7分钟前
LouieHuang发布了新的文献求助10
7分钟前
高分求助中
Evolution 10000
Sustainability in Tides Chemistry 2800
юрские динозавры восточного забайкалья 800
English Wealden Fossils 700
An Introduction to Geographical and Urban Economics: A Spiky World Book by Charles van Marrewijk, Harry Garretsen, and Steven Brakman 500
Diagnostic immunohistochemistry : theranostic and genomic applications 6th Edition 500
Chen Hansheng: China’s Last Romantic Revolutionary 500
热门求助领域 (近24小时)
化学 医学 生物 材料科学 工程类 有机化学 生物化学 物理 内科学 纳米技术 计算机科学 化学工程 复合材料 基因 遗传学 催化作用 物理化学 免疫学 量子力学 细胞生物学
热门帖子
关注 科研通微信公众号,转发送积分 3150609
求助须知:如何正确求助?哪些是违规求助? 2802008
关于积分的说明 7846029
捐赠科研通 2459372
什么是DOI,文献DOI怎么找? 1309219
科研通“疑难数据库(出版商)”最低求助积分说明 628696
版权声明 601757