Depth Anything: Unleashing the Power of Large-Scale Unlabeled Data

计算机科学 一般化 公制(单位) 集合(抽象数据类型) 单眼 人工智能 比例(比率) 数据集 简单(哲学) 编码器 杠杆(统计) 缩放比例 机器学习 数据挖掘 程序设计语言 经济 物理 哲学 数学分析 几何学 操作系统 认识论 量子力学 数学 运营管理
作者
Lihe Yang,Bingyi Kang,Zilong Huang,Xiaogang Xu,Jiashi Feng,Hengshuang Zhao
出处
期刊:Cornell University - arXiv [Cornell University]
被引量:9
标识
DOI:10.48550/arxiv.2401.10891
摘要

This work presents Depth Anything, a highly practical solution for robust monocular depth estimation. Without pursuing novel technical modules, we aim to build a simple yet powerful foundation model dealing with any images under any circumstances. To this end, we scale up the dataset by designing a data engine to collect and automatically annotate large-scale unlabeled data (~62M), which significantly enlarges the data coverage and thus is able to reduce the generalization error. We investigate two simple yet effective strategies that make data scaling-up promising. First, a more challenging optimization target is created by leveraging data augmentation tools. It compels the model to actively seek extra visual knowledge and acquire robust representations. Second, an auxiliary supervision is developed to enforce the model to inherit rich semantic priors from pre-trained encoders. We evaluate its zero-shot capabilities extensively, including six public datasets and randomly captured photos. It demonstrates impressive generalization ability. Further, through fine-tuning it with metric depth information from NYUv2 and KITTI, new SOTAs are set. Our better depth model also results in a better depth-conditioned ControlNet. Our models are released at https://github.com/LiheYoung/Depth-Anything.
最长约 10秒,即可获得该文献文件

科研通智能强力驱动
Strongly Powered by AbleSci AI
科研通是完全免费的文献互助平台,具备全网最快的应助速度,最高的求助完成率。 对每一个文献求助,科研通都将尽心尽力,给求助人一个满意的交代。
实时播报
YNWAlxh发布了新的文献求助10
刚刚
doudoudandy发布了新的文献求助10
刚刚
1秒前
1秒前
秋风的应助被萧笙采纳,获得50
1秒前
Nickel发布了新的文献求助10
1秒前
小二郎的应助被李欣采纳,获得10
2秒前
番茄发布了新的文献求助10
2秒前
2秒前
毗昙的应助被fcc采纳,获得10
2秒前
ss发布了新的文献求助10
2秒前
ecnu搬砖人发布了新的文献求助10
2秒前
2秒前
2秒前
等待的砖家完成签到,获得积分10
2秒前
慕青的应助被shuangcheng采纳,获得10
3秒前
十四发布了新的文献求助10
3秒前
无极微光的应助被听听采纳,获得20
3秒前
hanser的应助被哈哈采纳,获得10
3秒前
有缘完成签到,获得积分10
3秒前
woo完成签到,获得积分10
3秒前
天天快乐的应助被Wen采纳,获得10
3秒前
我是老大的应助被郭大神经采纳,获得10
4秒前
Maestro_S的应助被笑着流泪采纳,获得10
4秒前
4秒前
烂漫依琴完成签到,获得积分10
4秒前
万能图书馆的应助被hk采纳,获得10
5秒前
yoyo发布了新的文献求助10
5秒前
爆米花的应助被di采纳,获得10
5秒前
传奇3的应助被fcc采纳,获得10
5秒前
core发布了新的文献求助10
5秒前
疯狂的访文完成签到,获得积分10
6秒前
6秒前
大个的应助被秦时竹子采纳,获得10
6秒前
Power_Liu完成签到,获得积分10
6秒前
FashionBoy的应助被wumting采纳,获得10
7秒前
7秒前
Ethereal发布了新的文献求助10
7秒前
7秒前
李博宇发布了新的文献求助10
8秒前
高分求助中
(应助此贴封号)【重要!!请各用户(尤其是新用户)详细阅读】【科研通的精品贴汇总】 10000
拉伸高分子熔体中缠结行为的模拟和小角中子散射研究 1700
The World Atlas of Wine 9th edition 1000
奈特基础组织学:配套组织病理学(第4版)(Netter's Essential Histology With Correlated Histopathology) 800
John McDowells Bildungstheorie 800
Markov Decision Processes and Reinforcement Learning 700
八旗制度の研究 600
热门求助领域 (近24小时)
化学 材料科学 医学 生物 纳米技术 计算机科学 工程类 有机化学 化学工程 生物化学 物理 复合材料 内科学 催化作用 光电子学 人工智能 细胞生物学 无机化学 物理化学 数学
热门帖子
关注 科研通微信公众号,转发送积分 8169546
求助须知:如何正确求助?哪些是违规求助? 9562607
关于积分的说明 21766524
捐赠科研通 7761098
什么是DOI,文献DOI怎么找? 3430477
关于科研通互助平台的介绍 2554247
邀请新用户注册赠送积分活动 2475091