PERCEPTION
PanoWorld:迈向360°全景世界中的空间超感知
Changpeng Wang, Xin Lin, Junhan Liu, Yuheng Liu, Zhen Wang, Donglian Qi, Yunfeng Yan, Xi Chen
- 发表年份
- 2026
- 访问权限
- 开放获取
摘要
本文针对多模态大模型在空间理解上的局限,提出了一种全景原生理解方法,使模型能够直接在等距柱状投影全景图上进行连续、以观察者为中心的空间推理。通过构建大规模元数据管道和专用指令微调数据,作者引入了PanoWorld模型,显著提升了语义锚定、球面定位、参考系变换和深度感知3D空间推理能力。
关键词
360-degree perceptionpanoramic understandingspatial reasoningMLLMequirectangular projection
相关论文
PERCEPTION
📊 22,245 引用
Artificial intelligence: a modern approach
1995
PERCEPTION
📊 14,348 引用
Are we ready for autonomous driving? The KITTI vision benchmark suite
Andreas Geiger, P Lenz, R. Urtasun
2012
PERCEPTION
开放获取📊 9,777 引用
TensorFlow: Large-Scale Machine Learning on Heterogeneous Distributed Systems
Martı́n Abadi, Ashish Agarwal, Paul Barham 等 20 位作者
2016
PERCEPTION
📊 9,681 引用
Vision meets robotics: The KITTI dataset
Andreas Geiger, Philip Lenz, Christoph Stiller 等 4 位作者
2013