杏仁核在强化学习中扮演着重要角色

▼

过去基于强化学习的模型大多假设能够预测误差（误差是指期待结果和真实结果的差异，比如完成一个任务你的期待报酬是 10 元钱，但实际只拿到了7元钱，这里的误差就是 3 元钱）的多巴胺引起了前额—纹状体（frontal-striatal）回路的可塑性。其中纹状体对价值进行编码进而驱使个体做出决策。

然而，3 月 29 日在线发表在 Nature Neuroscience 上的 Motivational neural circuits underlying reinforcement learning 一文表明，杏仁核也在强化学习的过程中起着非常重要的作用。

文章的作者是来自国立卫生研究院（National Institutes of Health, NIH）的 Averbeck 和 Costa，文章以综述的形式对杏仁核和纹状体共同参与强化学习这一过程进行了阐述，着重强调了杏仁核的重要作用。

研究表明，纹状体也许在某种程度上接收到了杏仁核传入的信息，如下图所示，因此，纹状体可能不像之前人们所想的那样在强化学习中有那么重要的地位。

杏仁核在强化学习中对纹状体的信息输入示意图

虽然杏仁核损伤后学习的过程仍可以继续，但仅依靠纹状体的学习过程中学习率可能会受到影响。

作者认为，现有的强化学习抽象模型和计算模型应依照现有的研究结果进行修改，在模型中加入杏仁核和纹状体的连接，杏仁核可能比纹状体在强化学习中起着更重要的作用。

编译：中国传媒大学 脑科学与智能媒体研究院 王晔

本文为原创编译，转载务必注明出处，谢谢！

脑科学与智能媒体研究院招聘

【博士后】我院招聘计算神经科学等方向博士后2人

【社招】北京协同创新研究院招聘：高级数字媒体设计师；高级机器学习研发工程师；C++软件工程师；C# WinForm/WPF软件工程师；PHP后台开发工程师；流媒体开发工程师；Unity3D软件工程师

招聘详情请关注本微信号后，点击底部菜单栏查看

长按扫描二维码，关注我们的微信公众号