{“状态”:“确定”,“消息类型”:“工作”,“信息版本”:“1.0.0”,“邮件”:{“索引”:{“日期部分”:[[2024,9,8]],“日期时间”:“2024-09-08T03:28:44Z”,“时间戳”:1725766124007},“出版商位置”:“柏林,海德堡”,“参考计数”:50,“出版者”:“斯普林格-柏林-海德堡“,”isbn-type“:[{”type“打印”,“值”:“9783838 642375767“},{”类型“:“electronic”,“value”:“9783642375774”}],“license”:[{“start”:{“date-parts”:[[2014,1,1]],“date-time”:“2014-01T00:00:00Z”,“timestamp”:1388534400000},“content-version”:“tdm”,“delay-in-days”:0,“URL”:“https:\/\/www.springernature.com\/gp\researters\/text-and-data-mining”},{“tart”:2014,1,1]],“日期时间”:“2014-01-01T00:00:00Z”,“timestamp”:1388534400000},“content-version”:“vor”,“delay-in-days”:0,“URL”:“https:\/\/www.springernature.com//gp\/researters\/text-and-data-mining”}],“content-domain”:{“domain”:[],“crossmark-restriction”:false},”short-container-title“:[],”published-print“:{”date-parts“:[2014]]}”,“DOI”:“10.1007\/978-3642-3757777”-4_7“,”type“:”book-chapter“,”created“:{“date-parts”:[[2013,12,21]],“date-time”:“2013-12-21T07:56:39Z”,“timestamp”:1387612599000},“page”:“107-122”,“source”:”Crossref“,“is-referenced-by-count”:7,“title”:[“Cumulative Learning Through Intrinsic Reinforcements”],“prefix”:“10.1007”,“author”:[{”given“Vieri G”,“family”:“Santucci”,“sequence”:“first”,“affiliation”:[]},{“给定”:“Gianluca”,“family”:“Baldassarre”,“sequence”:“additional”,“affiliation”:[]},{“given”:“Marco”,“faily”:”Mirolli“,”sequence“:”additional“,”affiliation:[]}],“member”:“297”,“reference”:[{“issue”:“5504”,“key”:”7_CR1“,”first page“:”599“,”volume“:“291”,“author”:“J.Weng”,“year”:“2001”,“unstructured”:“Weng,J.、McClelland,J.,Pentland,A.、Sporns,O.、Stockman,I.、Sur,M.、Thelen,E.:人工智能。机器人和动物的自主智力发展。科学291(5504),599\u2013600(2001)”,“新闻标题”:“机器人和动物自主智力发展”。科学},{“问题”:“2”,“关键”:“7_CR2”,“首页”:“1”,“卷”:“7”,“author”:“G.Baldassarre”,“year”:“2010”,“unstructured”:“Baldasarre,G.,Mirolli,M.:理解技能的自主累积学习的主要开放挑战是什么?Auton.Mental Development.Newsl.7(2),2\u20139(2010)”,“journal-title”:“Auton.Mental Development-Newsl.”},{“key”:“7_CR3”,“doi-asserted-by”:“publisher”,“first page”:”297,“DOI”:“10.1037\/h0040934”,“volume”:“66”,“author”:“R.White”,“year”:“1959”,“unstructured”:“White,R.:动机重新考虑:能力的概念。心理学评论66,297\u2013333(1959)”,“journal-title”:“Psychol.Rev.”},{“volume-title“:冲突”,“年份”:“1960”,“作者”:“D.Berlyne”,“关键”:“7_CR4”,“非结构化”:“Berlyne,D.:冲突、唤起和好奇。McGraw Hill,New York(1960)”},{“问题”:“1”,“关键”:“7_CR5”,“doi-asserted-by”:“出版商”,“首页”:“54”,“doi”:“10.1006\/ceps.1999.1020”,“卷”:“25”,“作者”:“R.M.Ryan”,“年份”:“2000”,“非结构化”:“Ryan,R.M.,Deci,E.L.:内在和外在动机:经典定义和新方向。当代教育心理学25(1),54\u201367(2000)”,“新闻标题”:“当代教育心理学”},{“问题”:“1”,“关键”:“7_CR6”,“doi-asserted-by”:“出版商”,“首页”:“60”,“doi”:“10.1037\/h0054833”,“卷”:“47”,“作者”:“K.Montgomer”y“,”年份“:”1954“,“非结构化”:“Montgomery,K.:探索驱动在学习中的作用。《心理学杂志》47(1),60\u201364(1954)”,“期刊标题”:“心理学杂志”},{“问题”:“2”,“关键”:“7_CR7”,“doi-asserted-by”:“出版商”,“首页”:“257”,”doi“10.1080\/00221309.1957.9920369”,“卷”:“57”,“作者”:“R.A.Butler”,“年份”:“1957”,“非结构化”:“Butler,R.A.,Harlow,H.F.:区分学习和学习集对视觉探索的激励。《心理学杂志》57(2),257\u2013264(1957)”,“期刊标题”:“心理学杂志”},{“卷时间”:“行为原则”,“年份”:“1943”,“作者”:“C.L.赫尔”,“关键”:“7_CR8”,“非结构化”:“赫尔,C.L.:行为原则。阿普尔顿-世纪克罗夫茨,纽约(1943)”},{“问题”:“4”,“关键”:“7_CR9”,“doi-asserted-by”:“出版商”,“首页”:“261”,“doi”:“10.1037 \/h0040782”,“卷”:“48”,“作者”:“G.B.基什”,“年份”:“1955”,“非结构化”:“基什,G.B.:照明开始时的学习被用作强化刺激。压缩机。生理学。精神病。48(4),261\u2013264(1955)“,“期刊标题”:“J.Comp。生理学。精神病。“},{”key“:”7_CR10“,”doi-asserted-by“:”publisher“,”first page“:“1”,”doi“:”10.3758\/BF03211996“,“volume”:“6”,“author”:“P.Glow”,“year”:“1978”,“unstructured”:“Glow,P.,Winefield,A.:在因果结构环境中持续的感官变化。Learn.Behav.6,1\u201318(1978)”,“journal-title”:“Learn.Bihav.”},“key”:“7_CR11”,“doi-asserted-by“:”publisher“,”first-page“:”38“,”doi“:”10.3758\/BF03198952“,”volume“:”24“,”author“:”P.Reed“,”year“:”1996“,”unstructured“:”Reed,P.,Mitchell,C.,Nokes,T.:工具性二元辨别任务中假定中性刺激的内在强化特性。阿尼姆。李尔。行为。24,38\u201345(1996)“,“新闻标题”:“动画。李尔。行为。},{“key”:“7_CR12”,“doi-asserted-by”:“crossref”,“unstructured”:“Schmidhuber,J.:好奇的建模控制系统。摘自:《神经网络国际联合会议论文集》,第2卷,第1458\u20131463页。IEEE,Singapore(1991)“,“DOI”:“10.1109\/IJCNN.1991.170605”},{“key”:“7_CR13”,“unstructured”:“Huang,X.,Weng,J.:开发机器人价值体系中的新颖性和强化学习。in:Prince,C.,Demiris,Y.,Marom,Y.、Kozima,H.,Balkenius,C.(eds.)第二届表观遗传机器人国际研讨会论文集,第94卷,第47\u201355页。隆德大学(2002)“},{”key“:“7_CR14”,”doi-asserted-by“:”publisher“,”first page“:”703“,”doi“:”10.1109\/TEVC.2006.890271“,”volume“::”11“,”author“:”P.Oudeyer“,“year”:“2007”,“unstructured”:“Oudeyer,P.,Kaplan,F.,Hafner,V.:自主心理发展的内在激励系统。IEEE T.Evolut.Comput.11,703\u2013713(2007)”,“journal-title“:”IEEE T.Evolut。计算。},{“volume-title”:“机器人主动运动学习的内在动机目标探索:案例研究”,“年份”:“2010年”,“作者”:“A.Baranes”,“关键”:“7_CR15”,“非结构化”:“Baranes,A.,Oudeyer,P.Y.:机器人主动运动学习的内在动机目标探索:案例研究。In:IEEE \/RSJ智能机器人与系统国际会议论文集,台湾台北(2010)“},{“key”:“7_CR16”,“doi-asserted-by”:“crossref”,“unstructured”:“Barto,A.,Singh,S.,Chantanez,N.:内在动机学习的层次技能集合。在:《第三届发展性学习国际会议论文集》,第112\u2013119(2004)页,“DOI”:“10.21236\/ADA440280”},{“key”:“7_CR17”,“首页”:“E1”,“卷标题”:“第六届发展与学习国际会议论文集”,“作者”:“M.Schembri”,“年份”:“2007”,“非结构化”:“Schembri,M.、Mirolli,M.和Baldassarre,G.:为一个具有内在动机的强化学习机器人进化内部强化物。摘自:Demiris,Y.、Mareschal,D.、Scassella,B.、Weng,J.(编辑)《第六届国际发展与学习会议论文集》,pp.\u00a0E1\u20136。帝国理工学院,伦敦(2007)“},{“问题”:“1”,“关键”:“7_CR18”,“首页”:“2”,“卷”:“3”,“作者”:“P.Y.Oudeyer”,“年份”:“2007”,“非结构化”:“Oudeyer,P.Y.,Kaplan,F.:什么是内在动机?计算方法的类型学。Front.Neurorobot.1(1),1\u201314(2007)”,“新闻标题”:“计算方法的类型学。前面。神经机器人。“},{”卷标题“:“自然和人工系统中的内在动机学习”,“年份”:“2013”,“关键”:“7_CR19”,“非结构化”:“Baldassare,G.,Mirolli,M.(编辑):自然和人工系统中的内在动机学习。施普林格,柏林(2013)”},{”关键“:“7_CR20”,“首页”:“121”,“卷标题”:“第十届表观遗传机器人国际会议论文集”,“作者”:“V.G.Santucci”,“年份”:“2010年”,“非结构化”:“Santucce,V.G.,Baldassarre,G.,Mirolli,M.:通过内在动机的生物累积学习:视觉引导伸手发展的模拟机器人研究。在:Johansson,B.,Sahin,E.,Balkenius,C.(编辑)《第十届表观遗传学机器人国际会议论文集》,第121\u2013128页。隆德大学认知研究,隆德(2010)“},{“问题”:“6”,“关键”:“7_CR21”,“doi-asserted-by”:“出版商”,“首页”:“483”,“doi”:“10.1038”,“卷”:“5”,“作者”:“R.怀斯”,“年份”:“2004”,“非结构化”:“怀斯,R.多巴胺,学习和动机。Nat.Rev.Neurosci.5(6),483\u2013494(2004)”,“期刊标题”:“神经科学自然评论”},{“key“:“7_CR22”,“doi-asserted-by”:“publisher”,“first page”:“87”,“doi”:“10.1146”,annurev.pych.56.091103.070229”,“volume”:”57“,“author”:“W.Schultz”,“year”:“2006”,“unstructured”:“Schultz,W.:奖励的行为理论和神经生理学。每年。精神病牧师。57,87\u2013115(2006)“,“期刊标题”:“年度。精神病牧师。“},{”issue“:”3“,”key“:”7_CR23“,”doi-asserted-by“:”publisher“,”first-page“:”391“,”doi“:”10.1007\/s00213-006-0578-x“,”volume“:“191“:”精神药理学。“},{”issue“:”3“,”key“:”7_CR24“,”doi-asserted-by“:”crossref“,”first page“:“592”,”doi“:”10.1152\/jn.1990.63.3.592“,“volume”:“63”,“author”:“R.Romo”,“year”:“1990”,“unstructured”:“Romo,R.,Schultz,W.:猴中脑多巴胺神经元:自我启动手臂运动期间主动触碰反应的偶然性。神经生理学杂志。63(3),592\u2013606(1990)“,“期刊标题”:“神经生理学杂志。“},{”issue“:”2“,”key“:”7_CR25“,”doi-asserted-by“:”publisher“,”first-page“:”337“,”doi“:”10.1016\/0006-8993(91)90816-E“,”volume“:“567”,”author“:”T.Ljungberg“,”year“:”1991“,”unstructured“:”Ljungberg,T.,Apicella,P.,Schultz,W.:延迟交替行为中猴中脑多巴胺神经元的反应。《大脑研究》567(2),337\u2013341(1991)“,”journal-title“:”Brain Res.“},{”key“:”7_CR26“,”doi-asserted-by“:”crossref“,”first page“:“900”,”doi“:”10.1523\/JNEUROSCI.13-03-00900.1993“,”volume“:‘13’,”author“:”W.Schultz“,”year“:”1993“,”unstructured“:”Schultz,W.,Apicella,P.,Ljumberg,T.:在学习延迟反应任务的连续步骤中,猴子多巴胺神经元对反应和条件刺激的反应。《神经科学杂志》。13,900\u2013913(1993)“,“新闻标题”:《神经科学杂志》。“},{”issue“:“2”,”key“:“7_CR27”,”doi-asserted-by“:”crossref“,”first page“:”1024“,“doi”:“10.1152\/jn.1994.72.21024”,“volume”:“72”,“author”:“J.Mirenowicz”,“year”:“1994”,“unstructured”:“Mirenovicz,J.,Schultz,W.:灵长类多巴胺神经元奖赏反应不可预测性的重要性。《神经生理学杂志》72(2),1024\u20131027(1994)“,”《神经生理学杂志》。“},{”issue“:“1”,”key“:“7_CR28”,”doi-asserted-by“:”crossref“,”first page“:”145“,“doi”:“10.1152\/jn.1992.67.1.145”,“volume”:“67”,“author”:“T.Ljungberg”,“year”:“1992”,“unstructured”:“Ljungberg,T.,Apicella,P.,Schultz,W.:学习行为反应时猴多巴胺神经元的反应。《神经生理学杂志》67(1),145\u2013163(1992)”,“《神经生理学杂志》。“},{”issue“:“1”,”key“:“7_CR29”,”doi-asserted-by“:”crossref“,”first page“:”1“,”doi“:”10.1152\/jn.1998.80.1.1“,”volume“::”80“,”author“:”W.Schultz“,”year“:”1998“,”unstructured“:”Schultz,W.:多巴胺神经元的预测性奖赏信号。J.Neurosphical.80(1),1\u201327(1998)“,”journal title“:”J.Neuralsphysical“。”},“问题”:“4”,“密钥”:“7_CR30”,“doi-asserted-by“:”publisher“,”first page“:”651“,”doi“:”10.1016\/S0306-4522(00)00019-1“,”volume“:“96”,”author“:”J.C.Horvitz“,”year“:”2000“,”unstructured“:”Horvitz,J.C.:中角膜皮质和黑质纹状体多巴胺对显著非奖赏性事件的反应。Neuroscience 96(4),651\u2013656(2000)“,”journal-title“:”Neurosscience“},{“issue”:“5714”,“key”:“7_CR31”,“doi-asserted-by”:“publisher”,“first-page”:“1476”,“doi”:“10.1126\/science.1107026”,”volume“:”307“author”:“E.Domett”,“year”:“2005”,“unstructured”:“Dommett,E.、Coizet,V.、Blaha,C.D.、Martindale,J.、Lefebvre,V.,Walton,N.、Mayhew,J.E.W.、Overton,P.G.、Redgrave,P.:视觉刺激如何在短潜伏期激活多巴胺能神经元。《科学》307(5714),1476\u20131479(2005)“,“期刊标题”:“科学”},{“关键字”:“7_CR32”,“首页”:“249”,“卷时间”:“基底神经节的信息处理模型”,“作者”:“J.Houk”,“年份”:“1995”,“非结构化”:“Houk,J.、Adams,J.和Barto,A.:基底神经节如何生成和使用预测强化的神经信号的模型。摘自:Houk,J.C.、Davis,J.L.、Beiser,D.G.(编辑)《基底神经节的信息处理模型》,第249\u2013270页。麻省理工学院出版社,剑桥(1995)“},{“issue”:“5306”,“key”:“7_CR33”,“doi-asserted-by”:“publisher”,“first page”:《1593》,“doi”:“10.1126\/science.275.5306.1593”,“volume”:“275”,“author”:“W.Schultz”,“year”:“1997”,“unstructured”:“Schultz,W.,Dayan,P.,Montague,P.R.:预测和奖励的神经基质。science 275(5306),1593\u20131599(1997)”,“journal-title“:”Science“},{“volume-title”:“强化学习:导论”,“year”:“1998”,“author”:“R.Sutton”,“key”:“7_CR34”,“unstructured”:“Sutton,R.,Barto,A.:强化学习:简介。麻省理工学院出版社,剑桥(1998)”},},“issue”:“12”,“key”:”7_CR35“doi-asserted-by”:“publisher”,“first-page”:“967”,“doi”:“10.1038\/nrn2022”,“卷:“7”,“作者”:“P.Redgrave”,“年份”:“2006”,“非结构化”:“Redgrave,P.,Gurney,K.:短潜伏期多巴胺信号:在发现新动作中的作用?国家神经科学评论。7(12),967\u2013975(2006)“,“杂志标题”:《神经科学自然评论》。“},{”key“:”7_CR36“,”doi-asserted-by“:”publisher“,”first-page“:”138“,“doi”:“10.1016\/j.neuroscience.2011.07.060”,“volume”:“198”,“author”:“P.Redgrave”,“year”:“2011”,“unstructured”:“Redgrave,P.,Vautrelle,N.,Reynolds,J.N.J.:基底神经节重返回路结构的功能特性:选择和强化。神经科学。198,138\u2013151(2011)“,“新闻标题”:“神经科学。“},{”key“:”7_CR37“,”doi-asserted-by“:”publisher“,”首页“:”40“,”doi“:”10.1016\/j.neunet.2012.012“,”volume“:“39”“,”author“:”M.Mirolli“,”year“:”2013“,”unstructured“:”Mirolli,M.,Santucci,V.G.,Baldassarre,G.:相多巴胺作为驱动动作获得和奖励最大化的内在和外在强化的预测误差:一项模拟机器人研究。神经网络39,40\u201351(2013)“,“journal-title”:“神经网络”},{“key”:“7_CR38”,“doi-asserted-by”:“publisher”,“first page”:《E1》,“doi”:“10.1109\/DEVLRN.2011.6037367”,“volume-title“:《发展、学习和表观遗传机器人学国际会议论文集》(ICDL-EpiRob-2011),“author”:“G.Baldasserre”,“year”:“2011”,“非结构化”:“巴尔达萨雷,G.:什么是内在动机?生物学观点。收录于:Cangelosi,A.、Triesch,J.、Fasel,I.、Rohlfing,K.、Nori,F.、Oudeyer,P.Y.、Schlesinger,M.、Nagai,Y.(编辑)《发展与学习与表观遗传机器人学国际会议论文集》(ICDL-EpiRob-2011),pp.\u00a0E1\u20138。IEEE,Piscataway(2011)“},{“issue”:“1”,“key”:“7_CR39”,“doi-asserted-by”:“publisher”,“first-page”:“112”,“doi”:“10.1016\/j.brainresrev.2004.09.008”,“volume”:”48“,“author”:“P.Romanelli”,“year”:“2005”,“unstructured”:“Romanelli,P.,Esposito,V.,Schaal,D.W.,Heit,G.:基底神经节的体细胞遗传学:分离的感觉运动通道的实验和临床证据。Brain Res.Rev.48(1),112\u2013128(2005)“,“journal-title”:“Brain Res.Rev.”},{“issue”:“6”,“key”:“7_CR40”,“doi-asserted-by”:“publisher”,“first-page”:“638”,“doi”:“10.1016\/j.conb.2005.10.006”,《volume》:“15”,“author”:“A.M.Graybiel”,“year”:“2005”,“unstructured”:“Graybiel,A.M.:基础神经节:学习新技巧和喜欢它。货币。操作。神经生物学。15(6),638\u2013644(2005)“,“日记标题”:“货币。操作。神经生物学。“},{”issue“:“4\u20136”,”key“:“7_CR41”,”doi-asserted-by“:”publisher“,”first page“:”535“,”doi“:”10.1016\/S0893-6080(02)00047-3“,”volume“:15”,”author“:”D.Joel“,”year“:”2002“,”unstructured“:”Joel,D.,Niv,Y.,Ruppin,E.:基底神经节的Actor-critic模型:新的解剖和计算视角。神经网络15(4\u2013),535\u2013547(2002)“,”journal-title“:”Neural Network“},{”key“:”7_CR42“,”first page“:“1057”,“volume”:“99”,“author”:“R.S.Sutton”,“year”:“1999”,“unstructured”:“Sutton,R.S.,McAllester,D.A.,Singh,S.P.,Mansour,Y.:函数逼近强化学习的策略梯度方法。In:NIPS,vol.99,pp.1057\u20131063(1999)”,“,”journal-title“:”In:NIPS“},{“issue”:“2”,“key”:“7_CR43”,“doi-asserted-by”:“publisher”,“first-pages”:“241”,“doi”:“10.1016\/S0896-6273(02)00967-4”,“volume”:”36“,“author”:“W.Schultz”,“year”:“2002”,“unstructured”:“Schultz,W.:正式使用多巴胺和奖励。Neuron 36(2),241\u2013263(2002)”,“journal-title“:”Neuron“},{”issue“:”Suppl“,”key“:”7_CR44“,”doi-asserted-by“:”publisher“,”first page“:”1192“,”doi“:”10.1038\/81469“,”volume“:“3”,”author“:”A.Pouget“,”year“:”2000“,”unstructured“:”Pouget,A.,Snyder,L.H.:感觉运动转换的计算方法。自然神经科学。3(增刊),1192\u20131198(2000)“,“期刊标题”:“自然神经科学。“},{”key“:”7_CR45“,”doi-asserted-by“:”publisher“,”doi“:”10.1017\/CBO9780511543241“,”volume-title“:”径向基函数“,”author“:”M.Buhman“,”year“:”2003“,”unstructured“:”Buhman,M.:径向基函数。剑桥大学出版社,纽约(2003)“},“年份”:“2005”,“非结构化”:“Sutton,R.,Tanner,B.:时差网络。高级神经信息处理。系统。17,1377\u20131348(2005)“,“新闻标题”:“高级神经信息处理。系统。“},{”issue“:”2“,”key“:”7_CR47“,”doi-asserted-by“:”publisher“,”first-page“:”70“,”doi“:”10.1109\/TAMD.2010.2051031“,”volume“:“2”,”author“:”S.Singh“,”year“:”2010“,”unstructured“:”Singh,S.,Lewis,R.,Barto,A.,Sorg,J.:内在动机强化学习:进化视角。IEEE T.Auton.Mental Dev.2(2),70\u201382(2010)“,“”journal-title“:”IEEE T.Auton。心理发展“},{“问题”:“6”,“关键”:“7_CR48”,“doi-asserted-by”:“出版商”,“首页”:“1347”,“doi”:“10.1162\/089976602753712972”,“卷”:“14”,“作者”:“K.Doya”,“年份”:“2002”,“非结构化”:“Doya,K.,Samejima,K.、Katagiri,K.和Kawato,M.:基于多模型的强化学习。神经计算。14(6),1347\u20131369(2002)“,”日志标题“:”神经计算。},{“key”:“7_CR49”,“unstructured”:“Caligiore,D.,Mirolli,M.,Parisi,D.,Baldassarre,G.:一种生物启发的分层强化学习架构,用于模拟具有连续状态和动作的多种技能的学习。In:Johansson,B.,Sahin,E.,Balkenius,C.(eds.)第十届表观遗传学机器人国际会议论文集,第27\u201334页(2010)“,{”键“:”7_CR50“,”首页“:”141“,”卷标题“:”第七届表观遗传学机器人国际会议论文集“,”作者“:”M.Schembri“,”年份“:”2007“,”非结构化“:”Schembri,M.、Mirolli,M.和Baldassarre,G.:内在激励强化学习机器人中儿童期长度和学习参数的演变。收录于:Berthouze,L.、Dhristiofer,G.、Littman,M.、Kozima,H.、Balkenius,C.(编辑)《第七届表观遗传机器人国际会议论文集》,第141\u2013148页。隆德大学认知研究,隆德(2007)“}],“容器-时间”:[“进化、复杂性和人工生命”],“原始标题”:[],“语言”:“en”,“链接”:[{“URL”:“https:\/\/link.springer.com/content\/pdf\/10.1007\/978-3642-37577-4_7”,“内容类型”:“未指定”,“content-version”:“vor”,“intended-application”:“相似性检查”}]存放“:{“date-parts”:[[2023,2,9]],“date-time”:“2023-02-09T23:30:08Z”,“timestamp”:1675985408000},“score”:1,“resource”:{”primary“:{“URL”:“https:\/\/link.springer.com\/10.1007\/978-3642-37577-4_7”}},”subtitle“:[],”shorttitle“:[],”issued“642375767“,”9783642375774“],”references-count“:50,”URL“:”http://\/dx.doi.org\/10.1007\/978-3642-37577-4_7“,”关系“:{},”主题“:[],”发布“:{”日期部分“:[[2014]]}}}