V
主页
ECCV2024 | 训练45秒,渲染300+FPS!MVSGaussian:高效且可泛化的混合高斯渲染方法
发布人
Project: https://mvsgaussian.github.io Code: https://github.com/TQTQliu/MVSGaussian Paper: https://arxiv.org/abs/2405.12218 本文提出了MVSGaussian,这是一种从多视图立体(MVS)技术中推导出的新型通用3D高斯表示方法,可有效重建不可见场景。具体而言,1) 我们利用MVS来编码具有几何感知的高斯表示,并将其解码为高斯参数。2) 为了进一步提升性能,我们提出了一种混合高斯渲染方法,该方法集成了用于新视图合成的有效体渲染设计。3) 为了支持对特定场景的快速微调,我们引入了一种多视图几何一致性聚合策略,以有效聚合由通用模型生成的点云,作为每个场景优化的初始化。与以往通常需要每幅图像进行数分钟微调和数秒渲染的通用NeRF方法相比,MVSGaussian实现了每个场景的实时渲染,并提供了更好的合成质量。与基本的3D-GS相比,MVSGaussian在减少训练计算成本的同时,实现了更好的视图合成。我们在DTU、Real Forward-facing、NeRF Synthetic以及Tanks and Temples等数据集上进行了大量实验,验证了MVSGaussian在具备令人信服的通用性、实时渲染速度和快速场景优化能力的同时,达到了最先进的性能。
打开封面
下载高清视频
观看高清视频
视频下载器
ECCV 2024 超越3DGS!3D场景重建新方法!WildGaussians:不惧遮挡和外观变化!
逆天了!NeLF-Pro | 一个方法解决多种规模场景的快速渲染重建(CVPR'24)
【ICCV 2023】RegFormer:点云配准新方案!
ECCV2022 | DynamicDepth:无监督多帧单目深度的目标运动和遮挡分离
超逼真的数据!实时高质量渲染,用于动态城市场景建模的Street Gaussians
ECCV 2024 深度估计和3D重建新系统!DoubleTake杀疯了!
速度快!MobileNeRF:移动端实时渲染方案,Nerf导出Mesh
ECCV2022 workshop | 自动驾驶中的自监督学习part1(数据处理、深度估计、3D检测/跟踪、SLAM、定位等!)
使用概率深度补全的3D激光雷达重建(IROS2022)
【ICCV 2023】 Robust Depth:多种天气条件下的自监督单目深度估计新SOTA
逆天了!基于分层3D高斯表示的超大数据集实时渲染(SIGGRAPH 2024)
ECCV2022 | 高效视觉transformer中的自适应token采样!
ICCV 2023 | Make it 3D!扩散模型从单个图像生成高保真3D效果
强推!【计算机视觉实战】终于有博士把三维重建与3D点云讲的如此通俗易懂!全部悟透彻了!
ICCV 2023 | NeO 360: 用于户外场景稀疏视图合成的神经场
用于激光雷达视图合成和三维重建的瞬态神经辐射场
CVPR2022 | 超越COLMAP!面向大规模户外城市环境的辐射场
CVPR最佳论文候选:NeRF下一城! 用启发式引导分割去除瞬态干扰物,无需额外先验知识【中山大学】
十分钟速览!GPT-Driver的动机和整体框架
【IROS2022】联合学习结合语义分割!啪!泛化性这不就来了么~
NeRF在机器人技术中 应用的最新综述,旨在为 该领域提供重要参考指南
自动驾驶如何学好C++?
RealityCapture1.4-全部功能速览
毫米波雷达视觉算法CRAFT,这次彻底理解了!
ECCV'24开源 !无惧遮挡、动态、光照变化!最鲁棒的3DGS震撼来袭!
从0到1!彻底搞懂BEVFormer算法原理
【三维GS配准】GaussReg:利用GS进行3D配准的创新性粗到精框架
自动驾驶假数据效果逆天了!Panacea:如何生成全景可控BEV感知数据?
【NeurIPS 2022】Transformers泛化方式的探索!
为什么自动驾驶离不开模型部署?
RangeDet:基于Range-View的激光雷达3D目标检测网络(ICCV2021)
SLAMesh: 基于Mesh地图的实时LiDAR定位与Mesh建图方法分享
【CVPR 2024】刷爆榜单!SAFDNet:纯稀疏点云检测问鼎Waymo
自动驾驶决策模拟器问世?OccSora:4D占用生成模型颠覆行业!
ICCV 2023 | Point-SLAM:基于密集神经点云的SLAM!
突破次元壁!4D Gaussian Splatting来袭
最新3D多目标跟踪方法DirectTracker:基于直接图像对齐和光度学束调整的3D多目标跟踪(IROS2022)
UncertaintyTrack: 利用检测和定位不确定性进行多目标跟踪
鱼眼相机和超声波雷达是怎么做融合的?
如何查找和修复训练集中的标签错误?