Depth Injection Framework for RGBD Salient Object Detection

编码器 计算机科学 人工智能 RGB颜色模型 计算机视觉 判别式 突出 深度图 水准点(测量) 模式识别(心理学) 图像(数学) 大地测量学 地理 操作系统
作者
Shunyu Yao,Miao Zhang,Yongri Piao,Chaoyi Qiu,Huchuan Lu
出处
期刊:IEEE transactions on image processing [Institute of Electrical and Electronics Engineers]
卷期号:32: 5340-5352 被引量:10
标识
DOI:10.1109/tip.2023.3315511
摘要

Depth data with a predominance of discriminative power in location is advantageous for accurate salient object detection (SOD). Existing RGBD SOD methods have focused on how to properly use depth information for complementary fusion with RGB data, having achieved great success. In this work, we attempt a far more ambitious use of the depth information by injecting the depth maps into the encoder in a single-stream model. Specifically, we propose a depth injection framework (DIF) equipped with an Injection Scheme (IS) and a Depth Injection Module (DIM). The proposed IS enhances the semantic representation of the RGB features in the encoder by directly injecting depth maps into the high-level encoder blocks, while helping our model maintain computational convenience. Our proposed DIM acts as a bridge between the depth maps and the hierarchical RGB features of the encoder and helps the information of two modalities complement and guide each other, contributing to a great fusion effect. Experimental results demonstrate that our proposed method can achieve state-of-the-art performance on six RGBD datasets. Moreover, our method can achieve excellent performance on RGBT SOD and our DIM can be easily applied to single-stream SOD models and the transformer architecture, proving a powerful generalization ability.
最长约 10秒,即可获得该文献文件

科研通智能强力驱动
Strongly Powered by AbleSci AI
更新
PDF的下载单位、IP信息已删除 (2025-6-4)

科研通是完全免费的文献互助平台,具备全网最快的应助速度,最高的求助完成率。 对每一个文献求助,科研通都将尽心尽力,给求助人一个满意的交代。
实时播报
WB发布了新的文献求助10
刚刚
崔崔完成签到,获得积分10
刚刚
核桃小小苏完成签到,获得积分10
1秒前
1秒前
linjiebro完成签到,获得积分10
1秒前
合适鲂完成签到,获得积分10
1秒前
1秒前
心灵手巧完成签到 ,获得积分10
2秒前
量子星尘发布了新的文献求助10
2秒前
家若完成签到 ,获得积分10
2秒前
土豆你个西红柿完成签到,获得积分10
2秒前
3秒前
Ray完成签到,获得积分10
3秒前
nulinuli完成签到 ,获得积分10
3秒前
3秒前
团团与蛋蛋完成签到,获得积分20
3秒前
KHromance完成签到,获得积分10
3秒前
3秒前
3秒前
3秒前
3秒前
鲸落温柔海完成签到,获得积分10
4秒前
小杨完成签到,获得积分10
4秒前
Ahha完成签到 ,获得积分10
5秒前
5秒前
5秒前
开心完成签到 ,获得积分10
6秒前
光之战士完成签到 ,获得积分10
6秒前
洋气天天发布了新的文献求助10
6秒前
6秒前
lmh完成签到,获得积分10
7秒前
7秒前
7秒前
科研小王发布了新的文献求助10
7秒前
满意的寒凝发布了新的文献求助100
7秒前
8秒前
小龙完成签到,获得积分10
8秒前
8秒前
一只啾咪完成签到,获得积分10
9秒前
科研新秀z完成签到 ,获得积分10
9秒前
高分求助中
(应助此贴封号)【重要!!请各用户(尤其是新用户)详细阅读】【科研通的精品贴汇总】 10000
网络安全 SEMI 标准 ( SEMI E187, SEMI E188 and SEMI E191.) 1000
计划经济时代的工厂管理与工人状况(1949-1966)——以郑州市国营工厂为例 500
INQUIRY-BASED PEDAGOGY TO SUPPORT STEM LEARNING AND 21ST CENTURY SKILLS: PREPARING NEW TEACHERS TO IMPLEMENT PROJECT AND PROBLEM-BASED LEARNING 500
Why America Can't Retrench (And How it Might) 400
Two New β-Class Milbemycins from Streptomyces bingchenggensis: Fermentation, Isolation, Structure Elucidation and Biological Properties 300
Modern Britain, 1750 to the Present (第2版) 300
热门求助领域 (近24小时)
化学 材料科学 医学 生物 工程类 有机化学 生物化学 物理 纳米技术 计算机科学 内科学 化学工程 复合材料 物理化学 基因 催化作用 遗传学 冶金 电极 光电子学
热门帖子
关注 科研通微信公众号,转发送积分 4614444
求助须知:如何正确求助?哪些是违规求助? 4018649
关于积分的说明 12439260
捐赠科研通 3701425
什么是DOI,文献DOI怎么找? 2041187
邀请新用户注册赠送积分活动 1073927
科研通“疑难数据库(出版商)”最低求助积分说明 957600