arrow
返回

Exploring Supervised Contrastive Learning for Skeleton-Based Temporal Action Segmentation

delete2025-08-01
delete0
PRE
AI
B
Bowen Chen
H
Haoyu Ji
H
Hanwei Ma
R
Ruihan Lin
W
Wei Nie
W
Weihong Ren
Z
Zhiyong Wang
H
Honghai Liu
DOI:10.1109/TCDS.2025.3532694delete
delete原文链接
delete原文求助
delete分享
delete收藏
摘要

摘要

En 中文
基于骨架的时序动作分割(STAS)以长时序人体骨架序列作为输入,并在帧级别预测动作类别。当前的STAS方法主要采用帧级交叉熵损失,仅关注独热标签对数之间的关系,而忽略了帧级表示质量的重要性。为此,我们提出了一种新颖的监督对比骨架时序动作分割框架(SCSAS),用于优化表示学习。具体而言,我们的框架通过一个简单的投影头构建帧级嵌入空间,并利用三种新颖的对比损失优化该空间。这些损失通过拉近相同活动的表示、推远不同动作的表示,增强了帧级和段级之间的语义关系。此外,我们还引入了一种基于置信度的硬锚点采样策略,以提高对比学习的效率。最后,引入了一个边界精修模块,以充分利用优化后的表示优势。我们的方法能够无缝集成到现有的STAS方法中,并在各种数据集上一致地提升其性能,且无需额外的推理成本。通过引入边界精修分支,早期的STAS方法甚至可以达到与当前最优方法相当的性能。
Keyword:
Boundary refinement
memory bank
skeleton-based temporal action segmentation (SCSAS)
supervised contrastive learning

期刊

IEEE Transactions on Cognitive and Developmental Systems 封面图
IEEE Transactions on Cognitive and Developmental Systems
IF:
4.9
论文数:
1.1K
被引数:
3.5K

机构

暂无机构信息
引用论文

引用论文

err分享
err收藏
学者 查看更多内容