Gradient-Free De Novo Learning

doi:10.3390/e27090992

2025-09-22

Christopher D. Buckley

Tim Verbelen

DOI：10.3390/e27090992

原文链接

查看原文

摘要

En 中文

本技术笔记将主动推理应用于从零开始学习目标导向行为的问题，即从头学习。通过从头学习，我们指的是直接从观测数据中发现用于序列策略优化的离散生成模型的结构和参数。具体而言，我们的方法先扩展模型然后缩减模型，直到发现一个在（广义）状态上的收缩吸引子；该吸引集在目标状态之间提供最小作用路径，同时避开代价高昂的状态。隐含的效率在于通过自由能原理的视角重新构建学习问题，在该视角下，学习一个其动力学特征具有此类吸引集的生成模型就足够了。为提供背景，我们简要地将这一视角与基于价值的表述（如贝尔曼最优性）联系起来，然后将主动推理的表述应用于一个小型街机游戏，以说明从头结构学习和随之而来的能动性。

Keyword:

active inference

active learning

Bayesian model selection

compression

structure learning

planning

induction

AI总结

对已上传原文的论文进行重点信息的提取，主要内容包括：简要概述、研究摘要、背景介绍、关键亮点、图文解析、展望与总结。

期刊

Entropy

IF:

论文数:

956

被引数:

2.4W

机构

暂无机构信息

引用论文

Active Inference

IF0

2022-03-29

OAAI

Thomas Parr; Giovanni Pezzulo; Karl J. Friston

INFORMATION AND SELF-ORGANIZATION OF BEHAVIOR 信息约束驱动下的目标导向行为组织

Advances in Complex Systems

IF0

2013-05-01

PREAI

POLANI,DANIEL; PROKOPENKO,MIKHAIL; YAEGER,LARRY S.

Post hoc Bayesian model selection

NeuroImage

IF0

2011-06-01

OAAI

Karl Friston; Will Penny

Free Energy, Value, and Attractors

Computational and Mathematical Methods in Medicine

IF0

2012-01-01

OAAI

Karl Friston; Ping Ao

Cortical Hierarchies Perform Bayesian Causal Inference in Multisensory Perception 皮质层次结构在多感官感知中执行贝叶斯因果推理

PLOS Biology

IF0

2015-02-24

OAAI

Tim Rohe; Uta Noppeney

Active Inference and Intentional Behavior 主动推断与意向行为

NEURAL COMPUTATION

IF2.1

2025-03-18

OAAI

Salvatori, Tommaso; Isomura, Takuya; Tschantz, Alexander; Kiefer, Alex; Verbelen, Tim; Koudahl, Magnus; Paul, Aswin; Parr, Thomas; Razi, Adeel; Kagan, Brett J.; Buckley, Christopher L.; Ramstead, Maxwell J. D.

Information-Based Objective Functions for Active Data Selection

Neural Computation

IF0

1992-07-01

OAAI

David J. C. MacKay

Predictive information and explorative behavior of autonomous robots

The European Physical Journal B

IF0

2008-04-24

OAAI

N. Ay; N. Bertschinger; R. Der; F. Güttler; E. Olbrich