arrow
返回

CharFormer: Character-oriented attention network for string edit distance

delete2025-06-01
delete0
PRE
AI
X
X. Liu
W
Wei, Haobo
P
Peilun Yang
H
Haiyang Hu *
DOI:10.1016/j.knosys.2025.113482delete
delete原文链接
delete原文求助
delete分享
delete收藏
摘要

摘要

En 中文
字符串相似度计算在众多实际应用中扮演着至关重要的角色,例如相似性搜索和序列比对。字符串编辑距离(SED)是一种代表性的相似度度量方法,能够有效地衡量字符串之间的相似性。然而,其二次方复杂度使得SED的计算具有挑战性,尤其是在处理大规模数据集时。因此,近年来,越来越多的算法采用深度学习技术来加速SED的计算。然而,我们观察到现有方法通常采用双编码器框架来学习单个字符串的特征,这导致忽略了字符串之间的匹配信息。此外,这些方法未能充分利用子序列信息以及采样空间。为此,我们提出了一种基于字符的注意力网络CharFormer,用于学习SED的计算。具体而言,CharFormer在字符粒度上运行,利用输入字符串的内部序列信息以及它们之间的外部序列信息来学习字符和字符串的表示。随后,CharFormer使用两个预测头同时利用这两种信息来预测字符串之间的相似度。此外,我们还引入了子字符串之间的相似度以提供额外的监督,并设计了一种新颖的采样方法以充分挖掘采样空间。广泛的实验结果表明,CharFormer在性能上优于当前最先进的算法,且所提出的方法具有显著的有效性。
Keyword:
String similarity learning
Deep learning
Attention network

期刊

K
Knowledge-Based Systems
IF:
7.6
论文数:
1.2W
被引数:
4.5W

机构

Z
zhejiang laboratory
学者数:
331
论文数: 196
被引数: 49
引用论文

引用论文

H2MN
err2021-08-14
err0
PREAI
errZhen Zhang; Jiajun Bu; Martin Ester; Zhao Li; Chengwei Yao; Zhi Yu; Can Wang
err分享
err收藏
Progress in Machine Translation机器翻译的进展
err2022-11-01
err35
PREAI
errWang, Haifeng; Wu, Hua; He, Zhongjun; Huang, Liang; Church, Kenneth Ward
err分享
err收藏
err分享
err收藏
err分享
err收藏
A survey on training and evaluation of word embeddings词嵌入训练与评价研究综述
err2021-02-17
err21
errOAAI
errTorregrossa, Francois; Allesiardo, Robin; Claveau, Vincent; Kooli, Nihel; Gravier, Guillaume
err分享
err收藏
学者 查看更多内容