{“状态”：“确定”，“消息类型”：“工作”，“信息版本”：“1.0.0”，“邮件”：{“索引”：{-“日期-部件”：[[2024,9,20]]，“日期-时间”：“2024-09-20T16:18:03Z”，“时间戳”：1726849083461}，“引用-计数”：48，“发布者”：“SAGE出版物”，“问题”：“1”，“许可证”：[{“开始”：{:“日期-零件”：[2017,1,29]]，”日期-时间“：“2017-01-29T00:00:00Z”，“时间戳”：1485648000000}，“content-version”：“tdm”，“delay-in-days”：0，“URL”：“http://\/journals.sagepub.com/page\/policys\/text-and-data-mining-license”}]，“content-domain”：{“domain”:[“journals/sagepub.com”]，“crossmark-restriction”：true}，“short-container-title”：[“自适应行为”]，”published-print“：{”date-parts“：[2017,2]}，”抽象“：”在本文中，我们提出了一种基于Actor\u2013Critic类架构的联想两过程（ATP）理论的新型神经网络实现。我们的实现强调了差异报酬幅度和报酬遗漏期望的情感成分，因此我们对情感关联双过程理论（Aff-ATP）进行了建模。ATP被用于解释差异结果训练（DOT）程序的结果，该程序强调学习先前与这些结果相关的提示行动的差异评估结果。ATP假设存在一条2018年预期的2019年记忆路径，通过该路径，结果预期可以影响决策，甚至可以替代基于标准工作记忆输入的2018年回顾性2019年决策。虽然DOT程序在动物学习文献中得到了很好的认可，但它们以前没有进行过计算建模。本文提出的模型有助于通过基于DOT的经验数据捕获，在计算上阐明ATP的作用。我们的Af-ATP模型阐明了前瞻性记忆和回顾性记忆在决策中的不同作用（结合行动选择功能的输入）。在特定情况下，模型\u2019的预期路径允许在刺激\u2013反应\u2013结果意外事件发生变化后进行自适应切换（学习前正确的行动选择）<\/jats:p>“，”DOI“：”10.1177\/1059712316682999“，”type“：”journal-article“，”created“：{”date-parts“：[[2017,1,30]]，”date-time“：”2017-01-30T05:20:39Z“，”timestamp“：1485753639000}，”page“：nced-by-count“：11，”标题“：[”情感关联双过程理论：差异结果训练中适应性行为的神经网络研究“]，前缀：“10.1177”，卷：“25”，作者：[{“给定”：“罗伯特”，“家庭”：“洛维”，“序列”：“第一”，“从属”：[{'名称：“瑞典Sk\u00f6vde大学”}，{“名称”：“瑞典哥德堡大学”}]}family“：”Billing“，”sequence“：”additional“，”affiliation“：[{”name“：”University of Sk\u00f6vde，Sweden“}]}]，”member“：”179“，”published-online“：{”date-parts“：[[2017,1,29]]}，”reference“：[[{“key”：“bibr1-1059712316682999”，“doi-asserted-by”：“publisher”，“doi”：“10.1007\/s00221-011-2709-9”}，{“密钥”：“r2-1059712316682999“，”doi-asserted-by“：”publisher“，”doi“：”10.1080\/01969720118947“}，{“key”：“bibr3-1059712316682999”，“首页”：“146”，“volume-title”：“第九届表观遗传机器人学国际会议论文集：机器人系统中认知发展建模”，“author”：“Balkenius C.”，“year”：“2009”}，}“key:”bibr4-1059712316582999“，”doi-asserted-by“：”publisher“，”doi“：”10.1109 \/DEVLRN.2014.6982952“}，{“key”：“bibr5-1059712316682999”，“首页”：“1”，“卷”：“一”，“作者”：“Boureau Y.-L.”，“年份”：“2010”，“期刊标题”：“神经精神药理学评论”}，}，“key“：”bibr6-1059712316782999“，“卷时间”：“所发生的感觉：意识形成中的身体和情感”，“作家”：“Damasio A.R.”，“年”：“1999”}，{key“：”bibr7-1059712316682999“，”doi-asserted-by“：”publisher“，”doi“：”10.1016\/S0893-6080（02）00052-7“}，{“key”：“bibr8-1059712316582999”，“doi-assert-by”：“publisher”，“doi”：“10.1007\/s00426-009-0230-6”}，“key“”：”bibr 9-1059712311682999“”，”doi-asserted-by“：“publiser”，”doi:“10.1038\/nn209 77“}，{”key“：”bibr10-1059712316682999“，”doi-asserted-by“：”publisher“，”DOI“：”10.1016\/j.ridd.2014.03.031“}，{“key”：“bibr11-1059712316682999”，“DOI-asserted-by”：“publisher”，“DOI”：“10.1037\/h0100079”}，“key“：”bibr12-105971236682999“，”DOI-assert-by“：”publisher“，”DOI“:”10.1006\/lmot.2000.1060“}”，{publisher“，”DOI“：”10.1016\/S0023-9690（02）00510-6“}，{“key”：“bibr14-1059712316682999“，”doi-asserted-by“：”publisher“，”doi“：”10.1371\/journal.pcbi.1003024“}，{“key”：“bibr15-10597712316682 999”，“doi-assert-by”：“publisher”，“doi”：“10.3758\/s13420-011-0021-y”}，“key“：”bibr16-10597112316682999“}，{”key“：”bibr17-1059712316682999“，”doi-asserted-by“：”publisher”，“DOI”：“10.1037\/a023575”｝，｛“key”：“bibr18-059712316682999”，“DOI断言者”：“publisher”，“DOI”：“10.1016\/0023-9690（82）90007-8”｝，｛“key”：“bibr19-059712316682999”，“DOI断言者”：“publisher”，“DOI”：“10.1109\/ADPRL.2013.6615000”｝，｛“key”：“bibr22-1059712316682999”，“DOI断言者”：“publisher”，“DOI”：“10.1109\/DEVLRN.2014.6983021”｝，｛“密钥”：“bibr23-1059712316682999“，”首页“：”45“，”卷“：”46“，”作者“：”Maki P.“，”年份“：”1995“，”新闻标题“：”心理记录“}，{“key”：“bibr24-10597112316682999”，“doi-asserted-by”：“publisher”，“doi”：“10.1016\/j.ridd.2011.08.022”}，“key“：”bibr2595971231668299“，”卷标“：”期望和情感“，”作家“：“Miceli M.”，“年份”：“2014”}，{key”：“bibr26-1059712316682999”，“非结构化”：“Mor\u00e9n J.（2002）。情感和学习：杏仁核的计算模型，伦德大学博士论文。“}，{”key“：”bibr27-1059712316682999“，”doi-asserted-by“：”crossref“，”first page“：“383”，”doi“：”10.7551\/mitpress\/3120.003.0041“，”volume-title“：”From Animals to Animats 6“，”author“：”Mor\u00e9n J.“，“year”：“2000”}，”{”key“：wrer O.H.“，“年份”：“1947年”，“新闻标题”：“《哈佛教育评论》“}，{“key”：“bibr29-1059712316682999”，“doi-asserted-by”：“publisher”，“doi”：“10.1016\/S0079-7421（08）60080-8”}，“key“：”bibr30-1059712316682999“，”doi-assert-by“：”publisher“，”doi“：”10.1016\\0023-9690（80）90001-6“}doi“：”10.1016\/S0306-4522（98）00319-4“}，{“键”：“bibr32-1059712316682999“，“卷-时间”：“经典条件反射II：当前研究和理论”，“作者”：“Rescorla R.A.”，“年份”：“1972”}，{“关键”：“bibr33-10597123216682999”，“第一页”：“143”，“卷-title”：“杏仁核：情绪、记忆和精神障碍的神经生物学方面”，“作家”：“Rolls E.”，“年”：“1992”}、{“键”：“bibr34-1059712316682999“，”volume-title“：“大脑与情感”，”author“：”Rolls E.T.“，”year“：”1999“}，{“key”：“bibr35-10597112316682999”，”doi-asserted-by“：”publisher“，“doi”：“10.1177\/1754073913477514”}，“key“：”bibr36-10597123216682999“}，{”密钥“：”bibr37-1059712316682999“，”doi-asserted-by“：”publisher“，”doi“：”10.1196\/annals.1401.001“}，{“key”：“bibr38-1059712316682999”，“doi-assert-by”：“publisher”，“doi”：“10.1146\/annurev.neur.28.061604.135722”}，“key：“bibr40-1059712316682999”，“doi-asserted-by”：“publisher”，“doi”：“10.4324\/9781315798172“}，{“key”：“bibr41-1059712316682999”，“doi-asserted-by”：“publisher”，“doi”：“10.1016\/S0893-6080（02）00046-1”}，“{”key“：”bibr42-10597123216682999“，”doi-assert-by“：”publisher“，”doi“：”10.1007\/s002210050467“}”，{强化学习：导论”，“作者”：“Sutton R.S.”，“年份”：“1998年“}，{“key”：“bibr44-1059712316682999”，“doi-asserted-by”：“publisher”，“doi”：“10.1016\/0023-9690（70）90079-2”}，“key“：”bibr45-10597123016682999“，“first page”：”427“，“volume-title”：“In Classical Conditioning II:Current Research and Theory（pp），“author”：“Trapold M.A.”，“year”：“1972”}、{“key”：《经典条件反射II：当前研究与理论》（第二版）“doi-asserted-by”：“publisher”，“doi”：“10.3758\/BF03205290“}，{“key”：“bibr47-1059712316682999”，“doi-asserted-by”：“publisher”，“doi”：“10.3758\/BF03196047”}，“key“：”bibr48-10597123.16682999“，”doi-assert-by“：”publisher“，”doi“：”10.1037\/13937-016“}”，{”key“:”bibr49-1059712.316682999《动物智能》，“作者”：“Wasserman E。A.“，”年份“：“2006”}，{“key”：“bibr50-1059712316682999”，“doi-asserted-by”：“publisher”，“doi”：“10.1016\/S0010-9452（08）70445-3”}]，“container-title”：[“自适应行为”]，“原始标题”：[]，“language”：“en”，“link”：[{“URL”：“http://\journals.sagepub.com\/doi\/pdf\/10117\/105971236682999”type“：”application\/pdf“，”content-version“：”vor“，”intended-application“：”text-mining“}，{”URL“：”http://\/journals.sagepub.com/doi\/full-xml\/10.1177\/1059712316682999“，”content-type“：”application\/xml“，”content-version“：”vor“，”intended-application”：”text-mining“{”URL:“http://\journals/sagepub.com\/doi\/pdf\/101177/1059712316682999”，“content-type:”unspecified“，”content-version：“vor”，“intended-application“：”similarity-checking“}]，”deposed“：{”date-parts“：[2024,6,22]]，”date-time“：”2024-06-22T04:13:51Z“，”timestamp“：1719029631000}，”score“：1，”resource“：{primary”：{“URL”：“http://journals.sagepub.com\/doi\/10.1177\/1059712316682999”}，“subtitle”：[]，“shorttitle”：[]，“issued”：{“date-part”：[[2017,1,29]]}，“引用计数”：48，“新闻发布“：{”问题“：“1”，“published-print”：{“date-parts”：[[2017,2]}}，“alternative-id”：[“10.1177\/1059712316682999”]，“URL”：“http://\/dx.doi.org\/10.1177\/105911231682999”，“relation”：{}，”ISSN“：[”1059-7123“，”1741-2633“]，”ISSN-type“：[{”value“：”1059-71“，”type“打印“}，{”值“：”1741-2633“，”类型“：”电子“}]，”主题“：[]，”发布“：{”日期部分“：[[2017,1,29]]}}}