arrow
返回

Self-visual prompting for training-free recursive weakly supervised semantic segmentation

delete2026-07-16
delete0
PRE
AI
C
Congwei Zhang
Z
Zhibin Quan
Y
Yuncong Yao
DOI:10.1007/s00530-026-02496-3delete
delete原文链接
delete原文求助
delete分享
delete收藏
摘要

摘要

En 中文
弱监督语义分割旨在使用最少标注实现密集分割。然而,标准类激活图(CAM)通常表现出稀疏和不完整的激活。现有解决方案通常通过参数耦合优化来扩展这些激活,但这种适应可能引入数据集特定的偏差和额外的优化成本,尤其是在图像级监督有限的情况下。为解决这一问题,我们引入了自视觉提示(SVP),一种无需训练的CAM生成范式,采用递归自引导策略将优化从模型参数转移到输入上下文。通过利用背景模糊作为负视觉提示,SVP赋能冻结的视觉-语言模型自主纠正其注意力焦点。具体而言,我们的协同CAM提取模块充当提示解释器,通过协同动态梯度响应与静态结构一致性来解码可靠的语义锚点。在该语义先验的指导下,层次化提示生成器通过选择性模糊干扰区域而严格保持物体边界来构建空间负视觉提示。通过这两个模块的递归交互,我们的方法逐步提升CAM的质量。在CAM生成阶段无需任何参数更新的情况下,SVP建立了新的最佳状态,在PASCAL VOC数据集上最终分割mIoU达到75.2%,在MS COCO数据集上达到47.5%。
Keyword:
Weakly supervised semantic segmentation
Self-visual prompting
Training-free
Prompt learning
Vision-language models

期刊

Multimedia Systems 封面图
Multimedia Systems
IF:
3.1
论文数:
2.8K
被引数:
2.7K

机构

S
School of Automation
学者数:
741
论文数: 290
被引数: 0
S
Southeast University
学者数:
2.1W
论文数: 8.6K
被引数: 480
引用论文

引用论文

What’s the Point: Semantic Segmentation with Point Supervision
err2016-09-16
err0
PREAI
errAmy Bearman; Olga Russakovsky; Vittorio Ferrari; Li Fei-Fei
err分享
err收藏
Out-of-Candidate Rectification for Weakly Supervised Semantic Segmentation
err2023-06-01
err0
errOAAI
errZesen Cheng; Pengchong Qiao; Kehan Li; Siheng Li; Pengxu Wei; Xiangyang Ji; Li Yuan; Chang Liu; Jie Chen
err分享
err收藏
err分享
err收藏
Weakly Supervised Semantic Segmentation using Out-of-Distribution Data
err2022-06-01
err0
errOAAI
errJungbeom Lee; Seong Joon Oh; Sangdoo Yun; Junsuk Choe; Eunji Kim; Sungroh Yoon
err分享
err收藏
学者 查看更多内容