arrow
返回

Genetic Algorithm for Interpretability in Vision Language Models

delete2026-01-01
delete0
PRE
AI
M
Marcelo H. L. Barreto *
C
Cristiano L. Oliveira
F
Flávio A. O. Santos
N
Novais, Paulo
L
Leonardo Nogueira Matos
A
André Britto
DOI:10.1007/978-3-032-15987-8_40delete
delete原文链接
delete原文求助
delete分享
delete收藏
摘要

摘要

En 中文
深度学习的快速发展凸显了确保人工智能系统透明度和可信度的必要性,即需要能够解释模型决策的方法。在此背景下,可解释人工智能(XAI)已成为关键的研究领域。本研究提出了一种基于优化的可解释性方法,用于识别图像中与文本描述符语义相关性最高和最低的区域。我们将该任务表述为优化问题,并采用遗传算法探索解空间,以最大化或最小化图像区域与文本之间的语义对齐度。我们使用了一个基于ImageNet定制的数据集进行方法评估,该数据集包含1,000个类别,每个类别有5张图像和6-8个文本描述符。为进行比较,我们采用了几种现有的可解释性方法,包括显著性(Saliency)、引导反向传播(Guided Backpropagation)、Grad-CAM、梯度Shap(Gradient Shap)、积分梯度(Integrated Gradients)和输入乘梯度(InputXGradient)。实验结果表明,我们的方法在一致性上优于基线方法,实现了所选区域与其关联描述符之间更高的相似度分数。我们的研究结果表明,遗传算法在解决可解释性问题上具有有效性,为XAI提供了一种灵活且可扩展的方法。
Keyword:
Explainable artificial intelligence
Genetic algorithm
Vision language models
Optimization

期刊

I
INTELLIGENT SYSTEMS, BRACIS 2025, PT I
IF:
0
论文数:
41
被引数:
0

机构

U
universidade do minho
学者数:
1.1W
论文数: 1.1W
被引数: 10
U
Universidade Federal de Pernambuco
学者数:
1.3W
论文数: 7.3K
被引数: 5.3K
Universidade Federal de Sergipe 封面图
Universidade Federal de Sergipe
学者数:
4.6K
论文数: 2.5K
被引数: 2.0K
学者 查看更多机构
引用论文

引用论文

Deep Feature Factorization for Concept Discovery
err2018-10-09
err0
PREAI
errEdo Collins; Radhakrishna Achanta; Sabine Süsstrunk
err分享
err收藏
Explainable Artificial Intelligence (XAI) 2.0: A manifesto of open challenges and interdisciplinary research directions可解释人工智能 (XAI) 2.0: 开放挑战和跨学科研究方向的宣言
err2024-06-01
err49
errOAAI
errLongo, Luca; Brcic, Mario; Cabitza, Federico; Choi, Jaesik; Confalonieri, Roberto; Del Ser, Javier; Guidotti, Riccardo; Hayashi, Yoichi; Herrera, Francisco; Holzinger, Andreas; Jiang, Richard; Khosravi, Hassan; Lecue, Freddy; Malgieri, Gianclaudio; Paez, Andres; Samek, Wojciech; Schneider, Johannes; Speith, Timo; Stumpf, Simone
err分享
err收藏
Deep Learning in Medical Imaging医学成像中的深度学习
err2019-12-31
err190
errOAAI
errKim, Mingyu; Yun, Jihye; Cho, Yongwon; Shin, Keewon; Jang, Ryoungwoo; Bae, Hyun-jin; Kim, Namkug
err分享
err收藏
Optuna
err2019-07-25
err0
PREAI
errTakuya Akiba; Shotaro Sano; Toshihiko Yanase; Takeru Ohta; Masanori Koyama
err分享
err收藏
学者 查看更多内容