arrow
返回

Self-Paced Attribute Prototype Contrastive Learning for Cross-Modal Materials Perception

delete2026-02-27
delete0
PRE
AI
X
Xiaoqing Liu
Z
Zhiwen Yu
K
Kaixiang Yang
H
Huanqiang Zeng
J
Jun Jiang
C
C. L. Philip Chen
DOI:10.1109/tmm.2026.3668507delete
delete原文链接
delete原文求助
delete分享
delete收藏
摘要

摘要

En 中文
非接触式交互方法使机器人能够通过传感器和先进感知技术识别物体属性,无需物理接触。该方法增强了交互的灵活性和安全性,同时提供了更丰富、更直观的人机交互体验。当前研究聚焦于通过非接触特征提取进行跨模态检索,实现材料属性估计并推动物体感知的发展。然而,现有的跨模态材料检索方法忽视了学习同种材料类型内共享的共性属性。为解决此问题,我们提出了基于自定步长原型对比学习的材料感知方法(MPSPL)。首先,属性原型对比学习提取同种材料类型内的共享特征,聚集相似样本,并增强深度模型对材料属性的感知。其次,自定步长学习策略动态调整对比损失的温标系数,引导模型区分不同材料间的判别特征,并逐步识别固有属性。最后,大量实验验证了该方法在已知和未知材料类别条件下的有效性。实验结果表明,所提出的方法优于当前先进技术。
Keyword:
Cross-modal retrieval
materials perception
prototype learning
self-paced learning

期刊

IEEE Transactions on Multimedia 封面图
IEEE Transactions on Multimedia
IF:
9.7
论文数:
4.6K
被引数:
2.4W

机构

P
pengcheng laboratory
学者数:
462
论文数: 229
被引数: 0
X
Xiamen University of Technology
学者数:
3.9K
论文数: 2.5K
被引数: 5.1K
S
south china university of technology
学者数:
6.8W
论文数: 5.1W
被引数: 85
学者 查看更多机构
引用论文

引用论文

Physics-Inspired Structural Representations for Molecules and Materials受物理学启发的分子和材料的结构表示
err2021-07-26
err0
errOAAI
errFelix Musil; Andrea Grisafi; Albert P. Bartók; Christoph Ortner; Gábor Csányi; Michele Ceriotti
err分享
err收藏
Cross-Modal Haptic Compression Inspired by Embodied AI for Haptic Communications
err2025-01-01
err0
PREAI
errLu,Hang; Tan,Xinmeng; Chen,Mingkai; Zhang,Zhe; Zhang,Xuguang; Chen,Jianxin; Wei,Xin; Zhao,Tiesong
err分享
err收藏
Category Alignment Adversarial Learning for Cross-Modal Retrieval
err2022-01-01
err11
PREAI
errHe, Shiyuan; Wang, Weiyang; Wang, Zheng; Xu, Xing; Yang, Yang; Wang, Xiaoming; Shen, Heng Tao
err分享
err收藏
An End-To-End Graph Attention Network Hashing for Cross-Modal Retrieval
err2024-01-01
err0
PREAI
errJin,Huilong; Kou,Feifei; Luo,Jia; Shi,Lei; Yang,Jiapeng; Zhang,Shuang; Zhang,Yingxue; Zhu,Chuangying
err分享
err收藏
err分享
err收藏
err分享
err收藏
学者 查看更多内容