不确定环境下强化学习和决策的神经机制

项目名称： 不确定环境下强化学习和决策的神经机制

项目编号： No.31371019

项目类型： 面上项目

立项/批准年度： 2013

项目学科： 医药、卫生

项目作者： 李健

作者单位： 北京大学

项目金额： 80万元

中文摘要： 本项目拟将心理物理学，药理行为学，功能性核磁共振 (fMRI)以及学习和价值决策的计算模型结合起来，对人在不确定环境下如何学习环境的特征从而做出利益最大化的决策的问题进行研究。本项目着重于研究多巴胺基线浓度和其作用的脑区活动对学习和决策的调节作用，并通过三个角度的研究试图回答这个重要的科学问题：1)作为重要的神经调质，多巴胺的基线浓度如何影响强化学习中关键的信号--预测误差的计算； 2) 大脑奖赏通路的活动，特别是多巴胺浓度和强化学习中前景价值预测的关系以及 3) 奖赏通路中多巴胺神经元活动与基于行为经济学中展望理论的价值决策的联系，尤其是基线多巴胺浓度对框架效应的调节作用。本项目将为进一步理解奖赏通路，特别是多巴胺神经元在强化学习以及基于价值的决策过程的神经机制提供关键的原创性证据，从而为研究人脑如何在不确定的环境中进行动态的行为优化提供有力的理论指导和方法铺垫。

中文关键词： 不确定性；多巴胺；反事实；预测误差；跨期决策

英文摘要： In this project, we will combine psychophysics, neuropharmacology, functional MRI as well as computational learning and decision-making theories to investigate how humans learn to interact with the uncertain environment to maximize their personal gains. T

英文关键词： uncertainty；dopamine；counterfactual；prediction error；intertemporal choice