arrow
返回

Reinforcement Learning-Based Data Weight Optimization for Sequential Recommendation

delete2026-01-19
delete0
PRE
AI
王石泉 封面图
王石泉 (Shiquan Wang)
Y
Yicheng Di
J
Jiayu Bao
Z
Zhuolong Jiang
H
Hongjian Shi
马
马汝辉 (Ruhui Ma)
X
Xin Gao
Z
Zhiwei Song
袁
袁宏 (Yuan Hong)
Y
Yuan Liu
H
Haibing Guan
DOI:10.1109/TCE.2026.3655431delete
delete原文链接
delete原文求助
delete分享
delete收藏
摘要

摘要

En 中文
近期推荐系统领域的进展凸显了数据质量对模型性能的关键重要性。本文提出了一种基于强化学习的权重优化框架,称为RLWORec,旨在提升小规模推荐模型和大型语言模型(LLM)微调场景中的数据质量。通过在近端策略优化(PPO)框架下,采用策略梯度方法为训练样本动态分配连续重要性权重,该方法有效识别并过滤噪声数据,同时保留信息样本。与依赖静态评分机制的传统数据选择方法不同,RLWORec通过迭代优化与全局性能反馈自适应地学习样本重要性。在三个真实世界数据集上的广泛实验表明,RLWORec持续优于当前最优的数据选择基线方法,在显著减少训练数据量的情况下实现更优的推荐性能。我们的方法使小规模模型仅通过精心选择的子集即可超越全数据集的性能,同时使大规模模型仅需原始训练数据的2%即可达到相当的结果。
Keyword:
Recommendation systems
reinforcement learning
data selection
large language models

期刊

IEEE Transactions on Consumer Electronics 封面图
IEEE Transactions on Consumer Electronics
IF:
10.9
论文数:
5.3K
被引数:
6.8K

机构

B
bombardier nug signalling solutions company ltd
学者数:
1
论文数: 1
被引数: 0
U
UGO-AI Intelligent Technology Company Ltd.
学者数:
1
论文数: 1
被引数: 0
S
shanghai jiao tong university
学者数:
15.7W
论文数: 11.7W
被引数: 159
S
singpilot pte. ltd.
学者数:
1
论文数: 1
被引数: 0
J
jiangnan university
学者数:
8.8K
论文数: 2.4K
被引数: 0
学者 查看更多机构
引用论文

引用论文

Recommender Systems with Generative Retrieval具有生成检索的推荐系统
err2023-01-01
err0
PREAI
errChi,Ed; Heldt,Lukasz; Hong,Lichan; Hulikal Keshavan,Raghunandan; Kula,Maciej; Mehta,Nikhil; Rajput,Shashank; Samost,Jonah; Sathiamoorthy,Maheswaran; Singh,Anima; Tay,Yi; Tran,Vinh; Vu,Trung
err分享
err收藏
学者 查看更多内容