arrow
返回

Graph Topology-Guided Multi-Task Learning for Fall Detection

delete2026-09-07
delete0
delete
OA
AI
X
Xiangtao Zhao
P
Peilin Jin *
DOI:10.3390/s26175529delete
delete原文链接
delete原文求助
delete分享
delete收藏
摘要

摘要

En 中文
摔倒检测在复杂多人场景中面临视觉遮挡和尺度变化等挑战。为解决这些问题,本文提出了MTC-DETR,一种端到端的多任务协同检测框架。在特征提取骨干网络之后,MTC-DETR构建了动态尺度路由和任务调优编码器以适应尺度变化,该编码器整合了可变形大核注意力以增强跨尺度长程特征,并采用动态跨尺度融合和任务感知调度进行自适应多尺度聚集和任务特定特征校准。随后,设计了一种拓扑引导的双分支解码器用于目标检测和关键点检测。拓扑引导的局部-全局协同注意力通过多跳图卷积重建被遮挡的关键点,而跨分支姿态先验引导目标检测分支中的可变形交叉注意力采样,以增强定位鲁棒性。最后,引入同方差不确定性动态联合损失以解决多任务优化中的梯度冲突。实验结果表明,MTC-DETR在CAUCAFall、DiverseFall10500和MT-Fall数据集上分别取得了92.7%、88.9%和90.4%的mAP@0.5得分。所提出的框架优于14种当前最优方法,证明了其在真实世界摔倒检测应用中的鲁棒性和潜力。该模型已部署在乐聚Kuavo 5机器人上。部署实验结果显示,该模型在边缘计算平台上实现了44.2 FPS(INT8)的推理速度,满足摔倒检测的实时性要求。
Keyword:
fall detection
multi-task learning
graph topology prior
RT-DETR
occlusion robustness

期刊

Sensors 封面图
Sensors
IF:
3.5
论文数:
7.2W
被引数:
20.9W

机构

S
shihezi university
学者数:
4.3K
论文数: 1.1K
被引数: 1
引用论文

引用论文

Visionary vigilance: Optimized YOLOV8 for fallen person detection with large-scale benchmark dataset
err2024-09-01
err12
PREAI
errKhan, Habib; Ullah, Inam; Shabaz, Mohammad; Omer, Muhammad Faizan; Usman, Muhammad Talha; Guellil, Mohammed Seghir; Koo, Jakeoung
err分享
err收藏
End-to-End Object Detection with Transformers使用Transformers进行端到端对象检测
err2020-11-03
err0
PREAI
errNicolas Carion; Francisco Massa; Gabriel Synnaeve; Nicolas Usunier; Alexander Kirillov; Sergey Zagoruyko
err分享
err收藏
Fall Detection Using LBFD-Net: A Novel CNN-Based Architecture
err2025-08-07
err0
PREAI
errNabizade,Mahammad; Nacer,Nassima; Lajoie,Isabelle; Yahiaoui,Réda; Auber,Frédéric; Fayad,Moustafa
err分享
err收藏
学者 查看更多内容