arrow
返回

Benchmarking and Analyzing Generative Data for Visual Recognition

delete2025-09-01
delete0
delete
OA
AI
李
李波 (Bo Li)
H
Haotian Liu
L
Liangyu Chen
Y
Yong Jae Lee
Z
Ziwei Liu
DOI:10.1109/TPAMI.2025.3572476delete
delete原文链接
delete原文求助
delete分享
delete收藏
摘要

摘要

En 中文
大型预训练生成模型的发展拓展了其在视觉识别中作为有效数据生成器的潜力。本研究深入探讨了生成图像的影响,主要比较了利用外部数据的范式(即生成与检索与原始数据的对比)。我们的主要贡献包括:1) GenBench构建:我们设计了GenBench,一个包含22个数据集和2548个类别的广泛基准,用于评估各种视觉识别任务中的生成数据。2) CLER分数:为解决现有指标(如FID、CLIP分数)与下游识别性能相关性不足的问题,我们提出了CLER,一种无需训练的指标,用于在训练前指示生成数据对识别任务的效率。3) 新基准:将生成数据与来自同一外部池的检索数据进行比较,有助于阐明生成数据的独特特性。4) 外部知识注入:通过文本反转(Textual Inversion)对每个类别的特殊词元嵌入进行微调,在17个数据集上的性能得到提升,但在处理低分辨率参考图像时除外。我们的全面基准和分析突显了生成数据在视觉识别中的潜力,同时指出了未来研究的关键挑战。
Keyword:
Visual recognition
generative models
data-centric AI

期刊

IEEE Transactions on Pattern Analysis and Machine Intelligence 封面图
IEEE Transactions on Pattern Analysis and Machine Intelligence
IF:
18.6
论文数:
1.1K
被引数:
9.8W

机构

M
microsoft research, redmond, wa, usa
学者数:
13
论文数: 7
被引数: 0
N
Nanyang Technological University
学者数:
4.9W
论文数: 4.8W
被引数: 8.1W
U
university of wisconsin-madison
学者数:
3.5K
论文数: 1.5K
被引数: 2
学者 查看更多机构
引用论文

引用论文

Dict-BERT: Enhancing Language Model Pre-training with Dictionary
err2022-01-01
err0
errOAAI
errWenhao Yu; Chenguang Zhu; Yuwei Fang; Donghan Yu; Shuohang Wang; Yichong Xu; Michael Zeng; Meng Jiang
err分享
err收藏
Describing Textures in the Wild描述野外的纹理
err2014-06-01
err0
errOAAI
errMircea Cimpoi; Subhransu Maji; Iasonas Kokkinos; Sammy Mohamed; Andrea Vedaldi
err分享
err收藏
学者 查看更多内容