Mono‐MVS: textureless‐aware multi‐view stereo assisted by monocular prediction

单眼 计算机科学 人工智能 稳健性(进化) 计算机视觉 点云 匹配(统计) 像素 模式识别(心理学) 数学 生物化学 化学 统计 基因
作者
Y.-T. Fu,Maoteng Zheng,Peiyu Chen,Xiuguo Liu
出处
期刊:Photogrammetric Record [Wiley]
卷期号:39 (185): 183-204
标识
DOI:10.1111/phor.12480
摘要

Abstract The learning‐based multi‐view stereo (MVS) methods have made remarkable progress in recent years. However, these methods exhibit limited robustness when faced with occlusion, weak or repetitive texture regions in the image. These factors often lead to holes in the final point cloud model due to excessive pixel‐matching errors. To address these challenges, we propose a novel MVS network assisted by monocular prediction for 3D reconstruction. Our approach combines the strengths of both monocular and multi‐view branches, leveraging the internal semantic information extracted from a single image through monocular prediction, along with the strict geometric relationships between multiple images. Moreover, we adopt a coarse‐to‐fine strategy to gradually reduce the number of assumed depth planes and minimise the interval between them as the resolution of the input images increases during the network iteration. This strategy can achieve a balance between the computational resource consumption and the effectiveness of the model. Experiments on the DTU, Tanks and Temples, and BlendedMVS datasets demonstrate that our method achieves outstanding results, particularly in textureless regions.

科研通智能强力驱动
Strongly Powered by AbleSci AI
科研通是完全免费的文献互助平台,具备全网最快的应助速度,最高的求助完成率。 对每一个文献求助,科研通都将尽心尽力,给求助人一个满意的交代。
实时播报
刚刚
隐形曼青的应助被什玖采纳,获得10
刚刚
哇哇哇发布了新的文献求助10
1秒前
grosfgcrd完成签到,获得积分10
2秒前
TaoJ发布了新的文献求助10
3秒前
3秒前
3秒前
kalani发布了新的文献求助10
3秒前
苒苒发布了新的文献求助10
4秒前
4秒前
兔子发布了新的文献求助10
4秒前
6秒前
元吉的应助被子夜歌采纳,获得10
7秒前
虚幻慕凝完成签到,获得积分20
7秒前
张玉燕完成签到,获得积分10
7秒前
9秒前
南瓜饼完成签到,获得积分10
9秒前
Hao发布了新的文献求助10
9秒前
9秒前
12秒前
ccmm完成签到,获得积分10
12秒前
Twinkle发布了新的文献求助10
12秒前
王饼干完成签到,获得积分10
12秒前
陈1完成签到 ,获得积分10
14秒前
14秒前
Orange的应助被星星子采纳,获得10
16秒前
16秒前
大模型的应助被coco采纳,获得10
16秒前
17秒前
17秒前
饱满向梦完成签到 ,获得积分10
17秒前
初景发布了新的文献求助10
18秒前
19秒前
CodeCraft的应助被蔡文圣采纳,获得10
20秒前
20秒前
科研通AI6.2的应助被www采纳,获得10
20秒前
11发布了新的文献求助10
20秒前
大模型的应助被思qi采纳,获得10
21秒前
小杨完成签到,获得积分10
21秒前
无敌咖啡豆完成签到,获得积分10
21秒前
高分求助中
(应助此贴封号)【重要!!请各用户(尤其是新用户)详细阅读】【科研通的精品贴汇总】 10000
拉伸高分子熔体中缠结行为的模拟和小角中子散射研究 1700
The World Atlas of Wine 9th edition 1000
Sex, Aging, and Death in a Medieval Medical Compendium: Trinity College Cambridge MS R.14.52, Its Texts, Language, and Scribe 500
高分子基功能界面水蒸发材料与应用研究 500
外场增强的水汽发电研究 500
基于结构调控的功能化水诱导发电材料与器件研究 500
热门求助领域 (近24小时)
化学 材料科学 医学 生物 纳米技术 计算机科学 工程类 有机化学 化学工程 生物化学 物理 复合材料 内科学 催化作用 光电子学 人工智能 细胞生物学 无机化学 物理化学 数学
热门帖子
关注 科研通微信公众号,转发送积分 8189382
求助须知:如何正确求助?哪些是违规求助? 9576691
关于积分的说明 21849410
捐赠科研通 7787318
什么是DOI,文献DOI怎么找? 3435538
关于科研通互助平台的介绍 2559748
邀请新用户注册赠送积分活动 2482509