跳到正文
原文
Konrad Kording 的 Substack(计算神经科学与 NeuroAI 观点)· Konrad Kording·· 2026-02-24AI 评分22

Konrad Kording 谈学习的三种信号来源:进化、奖励与好奇心

Evolution, Reward, Curiosity: The Three Sources of Learning Signals

AI 导读

Konrad Kording 提出,进化适应度对个体而言几乎不产生可用误差信号,无法在生命周期内驱动大量小更新,因此大脑的类梯度下降必须依赖奖励与好奇心两种训练信号。奖励是代理信号但过于稀疏,且优化的是延迟奖励而非即时快感;好奇心则以降低预测误差、寻找可压缩结构为内在奖励,把几乎任何经验变成可学习信号。他警告,过度追求理解可能导致过拟合的世界模型,即阴谋论式的局部极小值。

AI 要点
主体
Konrad Kording 在其 Substack 发文,讨论大脑学习信号的三个来源:进化、奖励与好奇心。
事件
提出大脑可能在做类似梯度下降的更新,但目标函数并非单一:进化层面的适应度塑造系统,个体一生中则由奖励和好奇心提供训练信号。
时间
发布时间为 2026-02-24 00:36(北京时间)。
地点
原文未提及。
原因或背景
作者此前写过大脑类似梯度下降,读者追问目标函数是什么,本文回应这一问题。
方式或细节
适应度对个体几乎不产生可用误差信号;奖励是代理信号但稀疏,且应包含延迟奖励、社会奖励与习得目标;好奇心作为内在奖励,奖励减少预测误差、寻找可压缩结构;λ 是奖励与理解之间的权衡参数。

AI 依据原文整理,未经人工核对。

点击跳转原始链接kording.substack.com

来源:Konrad Kording 的 Substack(计算神经科学与 NeuroAI 观点) · kording.substack.com