凯时AG

2026-07-10 07:55:38 设为首页 | 加入珍藏

如视Argus入选ECCV,,,,, ,让图像也能提供LiDAR级位姿约束

2026-07-10 07:55:38 宣布 泉源:游戏茶苑 作者:郑淑芳 浏览:7661次

机械之心宣布

Luma AI、Aholo 、Scaniverse、KIRI 等消耗级 3DGS 应用的泛起,,,,, ,已经说明 3D Gaussian Splatting 正在走向通俗用户。。。。。。用户拿起手机,,,,, ,就希望把物体、房间,,,,, ,甚至完整空间,,,,, ,酿成可周游的 3D 内容。。。。。。

但若是想要效果够好,,,,, ,3DGS 就需要准确的位姿约束,,,,, ,否则效果会大打折扣:

左右滑动审查。。。。。。图1:某 APP 天生画面|图源小红书;;;;图 2:墙体弯曲;;;;图 3:墙面鼓包。。。。。。

这些 badcase 看起来像是 3DGS 渲染没有优化好,,,,, ,但实质上,,,,, ,往往是位姿与几何信息不敷准确。。。。。。

已往,,,,, ,解决这类问题最稳妥的方式是上 LiDAR 。。。。。。LiDAR 能提供准确的位姿约束,,,,, ,在一定水平解决上述问题,,,,, ,纵然在高难度视觉情形中,,,,, ,也能解算出足够鲁棒的位姿和几何,,,,, ,让 3DGS 优化收敛到更高质量的场景表达。。。。。。

但这也意味着更高的硬件本钱、更重的收罗流程,,,,, ,以及更难进入公共消耗级场景。。。。。。

近期,,,,, , ECCV 2026 效果宣布,,,,, ,Realsee 团队的效果 Argus: Metric Panoramic 3D Reconstruction for Indoor Scenes 乐成入选。。。。。。它面向室内全景图像,,,,, ,能够从希罕、无序的全景照片中,,,,, ,直接展望相机位姿、怀抱深度和点云重修效果,,,,, ,可以为 3DGS 提供更稳固、更精准的几何约束。。。。。。

Argus 论文地点:https://argus-paper.realsee.ai

如视的这项研究说明:未来可落地的 3DGS 重修,,,,, ,不再一定需要 LiDAR 来提供准确位姿。。。。。。只要有手机或全景相机拍摄的图像,,,,, ,再通过如视 Argus 获得高质量位姿和怀抱几何,,,,, ,就可以让 3DGS 进入更轻量、更低本钱、更公共化的收罗时代。。。。。。

先看效果:古板 SfM vs使用如视 Argus

可以把如视 Argus 明确成 3DGS 前面的“几何校准器”。。。。。。

使用古板 SfM(左)VS 使用如视 Argus(右)。。。。。。字迹、物体细节等效果显著提升

3DGS 通常依赖古板 SfM 来盘算位姿和初始几何。。。。。。遇到弱纹理、重复纹理、全景畸变、多房间毗连等场景时,,,,, ,容易泛起:

相机轨迹漂移;;;;墙体、门洞、家具边沿错位;;;;高斯点云局部堆叠或肿胀;;;;新视角周游时泛起闪灼和重影。。。。。。

在希罕收罗视角下,,,,, ,甚至会由于匹配缺乏导致位姿瓦解,,,,, ,无法天生 3DGS。。。。。。

经由如视 Argus 处理后,,,,, ,系统可以先获得更稳固的图像位姿、怀抱深度和点云结构,,,,, ,再将这些效果作为 3DGS 优化的初始约束 —— 最终效果会更靠近“空间级重修”,,,,, ,而不但是 “图片级拟合”。。。。。。

再看数据:如视 Argus 位姿与几何精度显著领先

在 Realsee3D 基准测试中,,,,, ,如视 Argus 在相机位姿、深度预计和点云重修上取得了 SOTA(state of the art) 级体现。。。。。。

以相机位姿为例,,,,, ,论文给出了 如视 Argus 与 VGGT360、MapAnything360、π3D360 等要领的比照。。。。。。和支持怀抱展望的 MapAnything360 相比,,,,, ,如视 Argus 在真实子集上将 ATE 从 0.134 降至 0.096,,,,, ,在合成子集上从 0.087 降至 0.027。。。。。。

Argus VS VGGT360、MapAnything360、π3D360

也就是说在真实室内场景中,,,,, ,如视 Argus 的全局位姿误差比 MapAnything360 降低约 28%;;;;在合成场景中,,,,, ,误差降低约 69%。。。。。。

关于常见栖身室内情形而言,,,,, ,在如视积累的全量数万万数据上训练后,,,,, ,误差更是低至 2.5cm,,,,, ,与常见 LiDAR 2cm 的误差已经很是靠近。。。。。。

另外,,,,, ,借助合成数据,,,,, ,如视 Argus 模子还能阻止 LiDAR 常见的多回波拖尾问题,,,,, ,以及玻璃、镜子、玄色物体测距禁绝带来的噪声或数据缺失。。。。。。

关于 3DGS 来说,,,,, ,这类提升很是要害。。。。。。位姿误差降低,,,,, ,不但是指标变好,,,,, ,而是直接影响最终效果:墙面更直、界线更锐、物体更少重影、周游时空间更稳固。。。。。。

从激光扫描到自由拍摄,,,,, ,空间重修正在换挡

如视 Argus 入选 ECCV 2026,,,,, ,不但是一次论文效果宣布,,,,, ,更像是一个行业信号:3D 重修正在从 “装备驱动” 走向 “模子驱动”。。。。。。已往,,,,, ,精准空间重修依赖专业硬件;;;;现在,,,,, ,大模子最先学习硬件背后的几何能力。。。。。。

对如视自身来讲,,,,, ,依托超 6000 万真实三维空间场景数据库,,,,, ,随着数据量、场景类型和训练样本一连增添,,,,, ,如视 Argus 模子对重大空间的明确能力也会一连提升。。。。。。

在未来,,,,, ,产品级 3DGS 将会有时机从重装备、重流程的专业收罗,,,,, ,走向更轻量、更低本钱、也更容易规;;;;目占渲匦薹绞。。。。。。

如视 Argus 展示的,,,,, ,正是这个偏向的第一步:用图像重修真实天下,,,,, ,用精准位姿约束 3DGS,,,,, ,让产品级 3DGS 从专业装备时代,,,,, ,迈向通俗用户也能加入的自由拍摄时代。。。。。。

中新社华盛顿5月15日电 美国总统特朗普15日竣事对华国是会见,,,,, ,启程返美。。。。。。关于此访,,,,, ,美国舆论从两国关系、经贸信号、台湾问题等差别视角予以关注。。。。。。美国主流媒体普遍以为,,,,, ,此访有助于维护美中双边关系稳固。。。。。。

责任编辑:黄信明    校对:张素贤

今日热门

  1. 东盟驻华使节冀深化对华水果商业 共享中国市场机缘
  2. 国际锐评丨外资怎样翻开投资中国的“下一篇”??
  3. 推进智能算力网络 加速AI与网络深度融合
  4. 南京与伊斯坦布尔举行双城文明对话活动
  5. 国台办新闻宣布会聚焦第十八届海峡论坛举行等热门
  6. 柳州海关2026年6月“关向导接待日”通告
  7. 西藏山南举行桑日思金拉错文旅品牌推介暨开湖仪式
  8. 山西大同市云冈区爆发3.2级地动
  9. 50对新人喜结连理 湖南株洲用“工业链”定制专属浪漫
  10. 伊朗称袭击美第五舰队爱国者导弹系统

相关推荐

【网站地图】