arrow
返回

Pseudo label refining for semi-supervised temporal action localization

delete2025-02-05
delete0
delete
OA
AI
L
Lingwen Meng *
G
Guobang Ban
G
Guanghui Xi
S
Siqi Guo
DOI:10.1371/journal.pone.0318418delete
delete原文链接
delete原文求助
delete分享
delete收藏
摘要

摘要

En 中文
时序动作定位模型的训练高度依赖于大量人工标注的数据。与图像标注相比,视频标注更为繁琐且耗时。因此,结合有标签和无标签数据进行联合训练的半监督方法已引起学术界和工业界的日益关注。本研究提出了一种基于教师-学生框架的方法,称为伪标签精炼(PLR),其包含三个关键组件。首先,我们提出了伪标签自精炼,其特点在于采用时域感兴趣区域池化,以提高TAL伪标签的边界精度。其次,我们设计了一个名为边界合成的模块,通过多次推理进一步精炼伪标签中的时域间隔。最后,为渐进式学习不同质量的伪标签,定制了一种自适应权重学习策略。本研究提出的方法使用ActionFormer和BMN作为检测器,在THUMOS14和ActivityNet v1.3数据集上取得了显著改进。实验结果表明,与其它先进的SSTAL方法相比,在标签率为10%至60%时,所提出的方法显著提高了定位精度。进一步的消融实验表明各模块的有效性,证明了PLR方法能够提高教师模型推理得到的伪标签的精度。

期刊

PLoS One 封面图
PLoS One
IF:
2.6
论文数:
2.6W
被引数:
81.6W

机构

G
guizhou power grid co ltd
学者数:
54
论文数: 27
被引数: 6
引用论文

引用论文

err分享
err收藏
Temporal Segment Networks: Towards Good Practices for Deep Action Recognition
err2016-09-17
err0
PREAI
errLimin Wang; Yuanjun Xiong; Zhe Wang; Yu Qiao; Dahua Lin; Xiaoou Tang; Luc Van Gool
err分享
err收藏
Graph Attention Based Proposal 3D ConvNets for Action Detection
err2020-04-03
err0
errOAAI
errJin Li; Xianglong Liu; Zhuofan Zong; Wanru Zhao; Mingyuan Zhang; Jingkuan Song
err分享
err收藏
err分享
err收藏
学者 查看更多内容