arrow
返回

Black-Box Test-Time Ensemble

delete2026-01-14
delete0
PRE
AI
S
Siyang Li
Z
Ziwei Wang
C
Chenhao Liu
D
Dongrui Wu
DOI:10.1109/MCI.2025.3624194delete
delete原文链接
delete原文求助
delete分享
delete收藏
摘要

摘要

En 中文
隐私考量在现代机器学习模型部署中已变得愈发关键。为保护敏感数据并降低存储或传输成本,许多服务提供商通过API提供训练好的模型,从而有效构建了隐私保护的“黑箱”模型。然而,评估此类模型的性能仍是一项重大挑战,尤其是在下游任务缺乏标注数据的情况下。本文提出了一种针对黑箱测试时集成的无监督组合方法。通过仅利用模型在未标注测试数据上的预测结果,所提方法可估计各基分类器的可靠性,并构建一个偏向更准确分类器的加权集成。该方法兼容传统机器学习分类器与现代大型语言模型,并适用于广泛场景,包括二分类与多分类、硬输出与软输出以及离线与在线设置。在13个真实世界的文本、图像及时间序列数据集上的大量实验验证了该方法的有效性与灵活性,其表现始终优于多数投票及其他组合方法。值得注意的是,所提方法无需超参数且计算高效,非常适合需要在线实时推理的应用场景。
Keyword:
Time series analysis
Closed box
Semisupervised learning
Rendering (computer graphics)
Reliability engineering
Data models
Robustness
Real-time systems
Computational efficiency
Ensemble learning

期刊

IEEE Computational Intelligence Magazine 封面图
IEEE Computational Intelligence Magazine
IF:
11.2
论文数:
620
被引数:
3.1K

机构

H
Huazhong University of Science and Technology
学者数:
4.5K
论文数: 1.4K
被引数: 65
引用论文

引用论文

When Machine Learning Meets Privacy: A Survey and Outlook当机器学习符合隐私: 调查和展望
err2021-03-05
err248
errOAAI
errLiu, Bo; Ding, Ming; Shaham, Sina; Rahayu, Wenny; Farokhi, Farhad; Lin, Zihuai
err分享
err收藏
Crowdsourced Data Management: A Survey
err2016-09-01
err205
PREAI
errLi, Guoliang; Wang, Jiannan; Zheng, Yudian; Franklin, Michael J.
err分享
err收藏
Truth inference in crowdsourcing
err2017-01-01
err0
errOAAI
errYudian Zheng; Guoliang Li; Yuanbing Li; Caihua Shan; Reynold Cheng
err分享
err收藏
Bagging predictorsBagging预测器
err1996-08-01
err1.0W
PREAI
errBreiman, L
err分享
err收藏
Blind Multiclass Ensemble Classification
err2018-09-15
err0
errOAAI
errPanagiotis A. Traganitis; Alba Pages-Zamora; Georgios B. Giannakis
err分享
err收藏
学者 查看更多内容