arrow
返回

MALOI: Multi-Task-Aware Low-Overhead In-Network Inference using Programmable Switch

delete2025-12-17
delete0
PRE
AI
H
Heewon Kim
C
Chanbin Bae
S
Seongyeon Yoon
H
Haeun Kim
H
Hwimo Ku
S
Sangheon Pack
DOI:10.1109/MCOM.001.2500137delete
delete原文链接
delete原文求助
delete分享
delete收藏
摘要

摘要

En 中文
随着可编程数据平面(PDP)中网络内智能(INI)能力的进步,高效执行多个任务的需求日益增长,而这一需求在可编程交换机约束条件下显得尤为突出。然而,依赖单任务学习(STL)模型进行INI面临难以满足这一需求的局限性。为解决这些挑战,我们开发了一种多任务感知的低开销网络内推理(MALOI)方案。MALOI通过利用多任务学习(MTL)模型,使多个任务共享隐藏层的参数,从而允许少数层同时执行大量推理任务。此外,MALOI选择部分关键特征并相应地压缩推理模型。评估结果表明,与STL模型相比,MALOI将内存使用量减少了48.8%,并将推理处理延迟缩短了91.5%,同时保持了足够高的分类性能。
Keyword:
Computational modeling
Multitasking
Adaptation models
Costs
Tuning
Neurons
Feature extraction
Artificial neural networks
Programmable control
Switching systems

期刊

IEEE Communications Magazine 封面图
IEEE Communications Magazine
IF:
8.2
论文数:
6.9K
被引数:
2.2W

机构

L
lg uplus corporation
学者数:
1
论文数: 1
被引数: 0
K
korea university
学者数:
4.9K
论文数: 2.2K
被引数: 1
引用论文

引用论文

IN3: A Framework for In-Network Computation of Neural Networks in the Programmable Data Plane
err2024-04-01
err0
PREAI
errZhang, Xiaoquan; Cui, Lin; Tso, Fung Po; Li, Wenzhi; Jia, Weijia
err分享
err收藏
Functional Split of In-Network Deep Learning for 6G: A Feasibility Study
err2022-10-01
err4
errOAAI
errHe, Jia; Wu, Huanzhuo; Xiao, Xun; Bassoli, Riccardo; Fitzek, Frank H. P.
err分享
err收藏
err分享
err收藏
err分享
err收藏
没有更多内容