arrow
返回

Debiased Multiplex Tokenization Using Mamba-Based Pointers for Efficient and Versatile Map-Free Visual Relocalization

delete2026-03-26
delete0
delete
OA
AI
W
Wenshuai Wang
刘宏 封面图
刘宏 (Hong Liu) *
S
Shengquan Li
P
Peifeng Jiang
D
Dandan Che
R
Runwei Ding *
DOI:10.3390/make8030083delete
delete原文链接
delete原文求助
delete分享
delete收藏
摘要

摘要

En 中文
视觉定位在移动机器人于GPS拒止环境下估计其位置和姿态方面发挥着关键作用。然而,其效率、鲁棒性和泛化能力因剧烈视角变化和显著外观差异而受到根本性削弱,这为现实条件下的基于图像的特征表示和位姿估计带来了持续挑战。最近,无地图视觉再定位(MFVR)已作为一种有望实现边缘设备轻量化部署和隐私隔离的范式出现,但如何在不依赖结构化3D地图的情况下学习紧凑且不变性的图像标记仍是一个核心问题,尤其是在高度动态或长期场景中。在本文中,我们提出了去偏多路标记器(DMT-Loc)作为一种新颖方法,用于高效且通用的MFVR以解决这些问题。具体而言,DMT-Loc基于预训练的视觉Mamba编码器,并集成了三个关键模块用于相对位姿回归:首先,多路交互式标记化通过非局部关联和跨域描述产生鲁棒图像标记。其次,去偏锚点注册通过邻近图检索和自回归指针分配促进锚点标记匹配。第三,几何信息位姿回归通过在每个解耦的回归头内部运行对称交换门控机制,赋能多层感知器,以支持在成对和多视图模式下准确且灵活的位姿预测。在七个公开数据集上的广泛评估表明,DMT-Loc在多样化的室内和室外环境中显著优于现有基线和消融变体。
Keyword:
visual localization
relative pose regression
Mamba codec
causal attention
pointer network

期刊

M
Machine Learning and Knowledge Extraction
IF:
6
论文数:
871
被引数:
1.8K

机构

P
Peking University
学者数:
1.0W
论文数: 3.8K
被引数: 14.7W
P
pengcheng laboratory
学者数:
462
论文数: 229
被引数: 0
引用论文

引用论文

DOLG: Single-Stage Image Retrieval with Deep Orthogonal Fusion of Local and Global Features
err2021-10-01
err0
errOAAI
errMin Yang; Dongliang He; Miao Fan; Baorong Shi; Xuetong Xue; Fu Li; Errui Ding; Jizhou Huang
err分享
err收藏
InLoc: Indoor Visual Localization with Dense Matching and View Synthesis
err2018-06-01
err0
errOAAI
errHajime Taira; Masatoshi Okutomi; Torsten Sattler; Mircea Cimpoi; Marc Pollefeys; Josef Sivic; Tomas Pajdla; Akihiko Torii
err分享
err收藏
err分享
err收藏
Long-Term Visual Localization Revisited重新审视长期视觉定位
err2022-04-01
err0
errOAAI
errCarl Toft; Will Maddern; Akihiko Torii; Lars Hammarstrand; Erik Stenborg; Daniel Safari; Masatoshi Okutomi; Marc Pollefeys; Josef Sivic; Tomas Pajdla; Fredrik Kahl; Torsten Sattler
err分享
err收藏
err分享
err收藏
err分享
err收藏
err分享
err收藏
学者 查看更多内容