arrow
返回

RootES: A Method for Generating Text Adversarial Examples Using Root Embedding Space

delete2026-01-01
delete0
PRE
AI
C
Changguang Wang
C
Cong Wang
Q
Qingru Li
F
Fangwei Wang *
DOI:10.1007/978-3-031-94445-1_13delete
delete原文链接
delete原文求助
delete分享
delete收藏
摘要

摘要

En 中文
深度学习在自然语言处理(NLP)中的广泛部署促使研究人员认识到现有模型对对抗样本的脆弱性。当前生成文本对抗样本的方法常表现出高扰动率、扰动方法有限和相似度差等问题。为解决这些问题,本文提出一种名为RootES的过程,利用根嵌入空间生成文本对抗样本。首先,采用具有多头自注意力机制增强的BERT(双向编码器表示来自Transformer)模型,以准确识别显著影响分类的关键词。其次,根嵌入空间模型寻找与关键词最相似的词根,进行字符级扰动,生成不同扰动类型的候选样本。最后,将候选样本视为不同簇,并选择其中一个作为最终混合型对抗样本,包含不同类型的替换。实验结果表明,在IMDB评论、Yelp评论和AG新闻数据集上生成的对抗样本,与现有方法相比具有更低的扰动率(PR)和更高的攻击成功率(SR)及相似度(Sim)。进一步实验证实,RootES生成的对抗样本具有良好的迁移性,且对抗训练增强了模型鲁棒性。
Keyword:
Text Adversarial Examples
Attention Mechanism
Deep Learning
Adversarial Training
Natural Language Processing

期刊

S
SECURITY AND PRIVACY IN COMMUNICATION NETWORKS, SECURECOMM 2024, PT I
IF:
0
论文数:
16
被引数:
0

机构

H
Hebei Normal University
学者数:
6.4K
论文数: 3.5K
被引数: 9
引用论文

引用论文

Robust convolutional neural networks against adversarial attacks on medical images
err2022-12-01
err16
errOAAI
errShi, Xiaoshuang; Peng, Yifan; Chen, Qingyu; Keenan, Tiarnan; Thavikulwat, Alisa T.; Lee, Sungwon; Tang, Yuxing; Chew, Emily Y.; Summers, Ronald M.; Lu, Zhiyong
err分享
err收藏
Adversarial examples for extreme multilabel text classification
err2022-11-04
err3
errOAAI
errQaraei, Mohammadreza; Babbar, Rohit
err分享
err收藏
WordChange: Adversarial Examples Generation Approach for Chinese Text Classification
err2020-01-01
err21
errOAAI
errNuo, Cheng; Chang, Guo-Qin; Gao, Haichang; Pei, Ge; Zhang, Yang
err分享
err收藏
Integrated deep learning paradigm for document-based sentiment analysis
err2023-07-01
err0
errOAAI
errPeter Atandoh; Fengli Zhang; Daniel Adu-Gyamfi; Paul H. Atandoh; Raphael Elimeli Nuhoho
err分享
err收藏
err
IF0
err
err0
PREAI
err
err分享
err收藏
err分享
err收藏
Effective text classification using BERT, MTM LSTM, and DT使用BERT、MTM LSTM和DT进行有效的文本分类
err2024-05-01
err0
PREAI
errSaman Jamshidi; Mahin Mohammadi; Saeed Bagheri; Hamid Esmaeili Najafabadi; Alireza Rezvanian; Mehdi Gheisari; Mustafa Ghaderzadeh; Amir Shahab Shahabi; Zongda Wu
err分享
err收藏
学者 查看更多内容