Depth Anything: Unleashing the Power of Large-Scale Unlabeled Data

计算机科学 一般化 公制(单位) 集合(抽象数据类型) 单眼 人工智能 比例(比率) 数据集 简单(哲学) 编码器 杠杆(统计) 缩放比例 机器学习 数据挖掘 程序设计语言 经济 物理 哲学 数学分析 几何学 操作系统 认识论 量子力学 数学 运营管理
作者
Lihe Yang,Bingyi Kang,Zilong Huang,Xiaogang Xu,Jiashi Feng,Hengshuang Zhao
出处
期刊:Cornell University - arXiv 被引量:9
标识
DOI:10.48550/arxiv.2401.10891
摘要

This work presents Depth Anything, a highly practical solution for robust monocular depth estimation. Without pursuing novel technical modules, we aim to build a simple yet powerful foundation model dealing with any images under any circumstances. To this end, we scale up the dataset by designing a data engine to collect and automatically annotate large-scale unlabeled data (~62M), which significantly enlarges the data coverage and thus is able to reduce the generalization error. We investigate two simple yet effective strategies that make data scaling-up promising. First, a more challenging optimization target is created by leveraging data augmentation tools. It compels the model to actively seek extra visual knowledge and acquire robust representations. Second, an auxiliary supervision is developed to enforce the model to inherit rich semantic priors from pre-trained encoders. We evaluate its zero-shot capabilities extensively, including six public datasets and randomly captured photos. It demonstrates impressive generalization ability. Further, through fine-tuning it with metric depth information from NYUv2 and KITTI, new SOTAs are set. Our better depth model also results in a better depth-conditioned ControlNet. Our models are released at https://github.com/LiheYoung/Depth-Anything.
最长约 10秒,即可获得该文献文件

科研通智能强力驱动
Strongly Powered by AbleSci AI
科研通是完全免费的文献互助平台,具备全网最快的应助速度,最高的求助完成率。 对每一个文献求助,科研通都将尽心尽力,给求助人一个满意的交代。
实时播报
背后的语海完成签到 ,获得积分10
1秒前
1秒前
小二郎应助hunter采纳,获得10
2秒前
33499083发布了新的文献求助10
2秒前
苏杰发布了新的文献求助10
2秒前
yuky完成签到,获得积分10
3秒前
战晓完成签到,获得积分10
4秒前
4秒前
uikymh完成签到 ,获得积分0
4秒前
wangnn发布了新的文献求助10
5秒前
hbb发布了新的文献求助10
5秒前
6秒前
yy发布了新的文献求助10
7秒前
家迎松完成签到,获得积分10
7秒前
7秒前
7秒前
万能图书馆应助苏杰采纳,获得10
7秒前
诃子给isonomia的求助进行了留言
8秒前
KevinT应助突突突采纳,获得100
8秒前
qiaojiahou完成签到,获得积分10
9秒前
Twonej应助kingwill采纳,获得30
9秒前
11秒前
orixero应助裴承昊采纳,获得10
11秒前
ss发布了新的文献求助10
11秒前
14秒前
yuqian完成签到,获得积分10
16秒前
16秒前
科研通AI6.3应助善良蜗牛采纳,获得30
17秒前
泛人类发布了新的文献求助10
17秒前
英俊的铭应助kamome采纳,获得10
18秒前
1733发布了新的文献求助30
18秒前
Winfred应助33采纳,获得10
20秒前
理想三寻发布了新的文献求助50
20秒前
百事可乐完成签到 ,获得积分10
20秒前
壮观复天完成签到 ,获得积分10
20秒前
21秒前
Java完成签到,获得积分0
21秒前
21秒前
yy完成签到,获得积分10
22秒前
23秒前
高分求助中
(应助此贴封号)【重要!!请各用户(尤其是新用户)详细阅读】【科研通的精品贴汇总】 10000
卤化钙钛矿人工突触的研究 1000
Engineering for calcareous sediments : proceedings of the International Conference on Calcareous Sediments, Perth 15-18 March 1988 / edited by R.J. Jewell, D.C. Andrews 1000
Wolffs Headache and Other Head Pain 9th Edition 1000
Continuing Syntax 1000
Harnessing Lymphocyte-Cytokine Networks to Disrupt Current Paradigms in Childhood Nephrotic Syndrome Management: A Systematic Evidence Synthesis 700
Signals, Systems, and Signal Processing 610
热门求助领域 (近24小时)
化学 材料科学 医学 生物 纳米技术 工程类 有机化学 化学工程 生物化学 计算机科学 物理 内科学 复合材料 催化作用 物理化学 光电子学 电极 细胞生物学 基因 无机化学
热门帖子
关注 科研通微信公众号,转发送积分 6253076
求助须知:如何正确求助?哪些是违规求助? 8075854
关于积分的说明 16867155
捐赠科研通 5327227
什么是DOI,文献DOI怎么找? 2836304
邀请新用户注册赠送积分活动 1813674
关于科研通互助平台的介绍 1668428