{“id”：“https://openalex.org/W2150318520“，”doi“：”https://doi.org/10.3389/fnbot.2013.00003“，”title“：“基于尺度自由能量的强化学习，用于高维状态空间中的稳健高效学习”，“display_name”：“基于规模自由能量的增强学习，用于高维状态空间的稳健高效学习”，“publication_year”：2013，“publiation_date”：“2013-01-01”，“ids”：{“openalex”：“https://openalex.org/W2150318520“，”doi“：”https://doi.org/10.3389/fnbot.2013.00003“，”mag“：”2150318520“，”pmid“：”https://pubmed.ncbi.nlm.nih.gov/23450126“，”pmcid“：”https://www.ncbi.nlm.nih.gov/pmc/articles/3584292“}，”language“：”en“，”primary_location“：{”is_oa“：true，”landing_page_url“：”https://doi.org/10.3389/fnbot.2013.00003，“pdf_url”：https://www.frontiersin.org/articles/10.3389/fnbot.2013.00003/pdf，“源”：{“id”：https://openalex.org/S115606517“，”“display_name”“：”神经机器人学的前沿“，”issn_l“：”1662-5218“，”isn“：[”1662-51218“]，”is_oa“：true，”is_in_doaj“：true，”host_organization“：”https://openalex.org/P4310320527“，”“host_organization_name”：“Frontiers Media”，“host_organization_lineage”：[“https://openalex.org/P4310320527“]，”host_organization_lineage_names“：[”Frontiers Media“]，“type”：“journal”}，“license”：“cc-by”，“licence_id”：“https://openalex.org/licenses/cc-by“，”version“：”publishedVersion“，”is_accepted“：true，”is_published“：true}，”type“：”article“，”type_crossref“：“journal-article”，”indexed_in“：[”crossref“，”doaj“，”publibmed“]，”open_access“：{”is_oa“：true，”oa_status“：”gold“，”oa_url“：”https://www.frontiersin.org/articles/10.3389/fnbot.2013.00003/pdf“，”any_repository_has_fulltext“：true}，”authorships“：[{”author_position“：”第一“，”作者“：{”id“：”https://openalex.org/A5068305732“，”display_name“：”Stefan Elfwing“，”orcid“：”https://orcid.org/0000-0001-6689-1000}，“机构”：[{“id”：https://openalex.org/I204250578“，”display_name“：”加州大学欧文分校“，”ror“：”https://ror.org/04gyf1771“，”country_code“：”US“，”type“：“教育”，”世系“：[”https://openalex.org/I204250578“]}，{”id“：”https://openalex.org/I4210104250“，”display_name“：”科学研究实验室“，”ror“：”https://ror.org/00sbgyf60“，”country_code“：”FR“，”type“：“非营利性”，”seriance“：[”https://openalex.org/I4210104250“]}，{”id“：”https://openalex.org/I1294671590“，”display_name“：”法国国家科学研究中心“，”ror“：”https://ror.org/02feahw73“，”country_code“：”FR“，”type“：“政府”，”世系“：[”https://openalex.org/I1294671590“]}，{”id“：”https://openalex.org/I4210104735“，”display_name“：”Sandia国家实验室“，”ror“：”https://ror.org/01apwpt12“，”country_code“：”US“，”type“：“facility”，”lineage“：[”https://openalex.org/I1330989302","https://openalex.org/I198811213","https://openalex.org/I4210104735“]}，{”id“：”https://openalex.org/I142637625“，”display_name“：”冲绳理工大学研究生院“，”ror“：”https://ror.org/02qg15b79“，”country_code“：”JP“，”type“：“教育”，”世系“：[”https://openalex.org/I142637625“]]，”国家“：[”FR“，”JP“，”US“]，”is_corresponding“：true，”raw_author_name“：”Stefan Elfwing“，”raw_affiation_strings“：[”Brandon Rohrer，Sandia National Laboratories，USA“，”法国国家科学研究中心“，”日本冲绳研究生大学冲绳科学技术研究所神经计算单元“，”美国加州大学欧文分校“]}，{“author_position”：“middle”，“author”：{“id”：“https://openalex.org/A5031054137“，”display_name“：”Eiji Uchibe“，”orcid“：”https://orcid.org/0000-0001-7908-0258}，“机构”：[{“id”：https://openalex.org/I204250578“，”display_name“：”加州大学欧文分校“，”ror“：”网址：https://ror.org/04gyf1771“，”country_code“：”US“，”type“：“教育”，”世系“：[”https://openalex.org/I204250578“]}，{”id“：”https://openalex.org/I4210104250“，”display_name“：”科学研究实验室“，”ror“：”https://ror.org/00sbgyf60“，”country_code“：”FR“，”type“：“非营利性”，”seriance“：[”https://openalex.org/I4210104250“]}，{”id“：”https://openalex.org/I1294671590“，”display_name“：”法国国家科学研究中心“，”ror“：”https://ror.org/02feahw73“，”country_code“：”FR“，”type“：“政府”，”世系“：[”https://openalex.org/I1294671590“]}，{”id“：”https://openalex.org/I4210104735“，”display_name“：”Sandia国家实验室“，”ror“：”https://ror.org/01apwpt12“，”country_code“：”US“，”type“：“facility”，”lineage“：[”https://openalex.org/I1330989302","https://openalex.org/I198811213","https://openalex.org/I4210104735“]}，{”id“：”https://openalex.org/I142637625“，”display_name“：”冲绳理工大学研究生院“，”ror“：”https://ror.org/02qg15b79“，”country_code“：”JP“，”type“：“教育”，”世系“：[”https://openalex.org/I142637625“]}]，”countries“：[”FR“，”JP“，”US“]，”is_corresponding“：false，”raw_author_name“：”Eiji Uchibe“，”raw _affiliation_strings“：【”Brandon Rohrer，Sandia National Laboratories，USA“，”Centre National de la Recherche Scientifique，France“，”Neural Computation Unit，冲绳理工学院，研究生院，日本冲绳“，”美国加州大学欧文分校“]}，{“author_position”：“last”，“author”：{“id”：“https://openalex.org/A5004840638“，”display_name“：”Kenji Doya“，”orcid“：”https://orcid.org/0000-0002-2446-6820}，“机构”：[{“id”：https://openalex.org/I204250578“，”display_name“：”加州大学欧文分校“，”ror“：”https://ror.org/04gyf1771“，”country_code“：”US“，”type“：“教育”，”世系“：[”https://openalex.org/I204250578“]}，{”id“：”https://openalex.org/I4210104250“，”display_name“：”科学研究实验室“，”ror“：”https://ror.org/00sbgyf60“，”country_code“：”FR“，”type“：”非营利“，”沿袭“：[”https://openalex.org/I4210104250“]}，{”id“：”https://openalex.org/I1294671590“，”display_name“：”法国国家科学研究中心“，”ror“：”https://ror.org/02feahw73“，”country_code“：”FR“，”type“：“政府”，”世系“：[”https://openalex.org/I1294671590“]}，{”id“：”https://openalex.org/I4210104735“，”display_name“：”桑迪亚国家实验室“，”ror“：”https://ror.org/01apwpt12“，”country_code“：”US“，”type“：“facility”，”lineage“：[”https://openalex.org/I1330989302","https://openalex.org/I198811213","https://openalex.org/I4210104735“]}，{”id“：”https://openalex.org/I142637625“，”display_name“：”冲绳理工大学研究生院“，”ror“：”https://ror.org/02qg15b79“，”country_code“：”JP“，”type“：“教育”，”世系“：[”https://openalex.org/I142637625“]}]，”countries“：[”FR“，”JP“，”US“]，”is_corresponding“：false，”raw_author_name“：”Kenji Doya“，“raw_affiliation_strings”：[”Brandon Rohrer，Sandia National Laboratories，USA“，”Centre National de la Recherche Scientifique，France“，”Neural Computation Unit，冲绳科学技术研究生院，冲绳大学，日本冲绳“，”美国加州大学欧文分校“]}]，”countries_disticont_count“：3，”institutions_distic“：5，”corresponding_author_ids“：[”https://openalex.org/A5068305732“]，”对应的机构ID“：[”https://openalex.org/I204250578","https://openalex.org/I4210104250","https://openalex.org/I1294671590","https://openalex.org/I4210104735","https://openalex.org/I142637625“]，”apc_list“：{”value“：2950，”currency“：”USD“，”value_USD“：2960，”provenance“：”doaj“}，”apc _payed“：”{“value”：2950、”currentary“：”美元“，”value_USD”：2950.，“provenance”：“doaj”}，“has_fulltext”：true，“fulltext_origin”：“pdf”，“cited_by_count”：9，“citecd_by_percentile_year”：{“min”：86，“max”：87}，“biblio”：{“volume”：“7”，“issue”：null，“first_page”：nul，“last_page”：null}，“is_retracted“：false，”is_paratext“：fase，”primary_topic“：{”id“：”https://openalex.org/T10462“，”display_name“：”强化学习算法“，”score“：0.9996，”subfield“：{”id“：”https://openalex.org/subfields/1702“，”display_name“：”人工智能“}，”字段“：{”id“：”https://openalex.org/fields/17“，”display_name“：”Computer Science“}，”domain“：{”id“：”https://openalex.org/domains/3“，”display_name“：”物理科学“}}，”主题“：[{”id“：”https://openalex.org/T10462“，”display_name“：”强化学习算法“，”score“：0.9996，”subfield“：｛”id“：”https://openalex.org/subfields/1702“，”display_name“：”人工智能“}，”字段“：{”id“：”https://openalex.org/fields/17“，”display_name“：”Computer Science“}，”domain“：{”id“：”https://openalex.org/domains/3“，”display_name“：”物理科学“}}，{”id“：”https://openalex.org/T12611“，”“display_name”：“用于神经计算的光子库计算”，“score”：0.9923，“subfield”：{“id”：“https://openalex.org/subfields/1702“，”display_name“：”人工智能“}，”字段“：{”id“：”https://openalex.org/fields/17“，”display_name“：”Computer Science“}，”domain“：{”id“：”https://openalex.org/domains/3“，”display_name“：”物理科学“}}，{”id“：”https://openalex.org/T10320“，”display_name“：”神经网络基础与应用“，”score“：0.9914，”subfield“：{”id“：”https://openalex.org/subfields/1702“，”display_name“：”人工智能“}，”字段“：{”id“：”https://openalex.org/fields/17“，”display_name“：”Computer Science“}，”domain“：{”id“：”https://openalex.org/domains/3“，”display_name“：”物理科学“}}]，”关键词“：[{”id“：”https://openalex.org/keywords/reinforcement-learning网站“，”display_name“：”强化学习“，”score“：0.604606}，{”id“：”https://openalex.org/keywords/function-approximation（https://openalex.org/keywords/function-approximation）“，”display_name“：”函数近似“，”score“：0.541141}，{”id“：”https://openalex.org/keywords/backpropagation-learning网站“，”display_name“：”反向传播学习“，”score“：0.511009}]，”concepts“：[{”id“：”https://openalex.org/C97541855，“wikidata”：https://www.wikidata.org/wiki/Q830687“，”display_name“：”强化学习“，”level“：2，”score“：0.8267585}，{”id“：”https://openalex.org/C67203356，“wikidata”：https://www.wikidata.org/wiki/Q1321905“，”display_name“：”钢筋“，”level“：2，”score“：0.567957}，{”id“：”https://openalex.org/C41008148，“wikidata”：https://www.wikidata.org/wiki/Q21198“，”display_name“：”计算机科学“，”level“：0，”score“：0.5136716}，{”id“：”https://openalex.org/C48103436，“wikidata”：https://www.wikidata.org/wiki/Q599031“，”display_name“：”State（computer science）“，”level“：2，”score“：0.4270399}，{”id“：”https://openalex.org/C47932503，“wikidata”：https://www.wikidata.org/wiki/Q5395689“，”display_name“：”错误驱动学习“，”level“：3，”score“：0.41248927}，{”id“：”https://openalex.org/C154945302，“wikidata”：https://www.wikidata.org/wiki/Q11660“，”display_name“：”人工智能“，”level“：1，”score“：0.38219324}，{”id“：”https://openalex.org/C192562407，“wikidata”：https://www.wikidata.org/wiki/Q228736“，”display_name“：”材料科学“，”level“：0，”score“：0.22608003}，{”id“：”https://openalex.org/C159985019，“wikidata”：https://www.wikidata.org/wiki/Q181790“，”display_name“：”复合材料“，”level“：1，”score“：0.063560456}，{”id“：”https://openalex.org/C11413529，“wikidata”：https://www.wikidata.org/wiki/Q8366“，”display_name“：”Algorithm“，”level“：1，”score“：0.059803277}]，”mesh“：[]，”locations_count“：5，”location“：[{”is_oa“：true，”landing_page_url“：”https://doi.org/10.3389/fnbot.2013.00003，“pdf_url”：https://www.frontiersin.org/articles/10.3389/fnbot.2013.00003/pdf，“源”：{“id”：https://openalex.org/S115606517“，”“display_name”“：”神经机器人学的前沿“，”issn_l“：”1662-5218“，”isn“：[”1662-51218“]，”is_oa“：true，”is_in_doaj“：true，”host_organization“：”https://openalex.org/P4310320527“，”“host_organization_name”：“Frontiers Media”，“host_organization_lineage”：[“https://openalex.org/P4310320527“]，”host_organization_lineage_names“：[”Frontiers Media“]，“type”：“journal”}，“license”：“cc-by”，“licence_id”：“https://openalex.org/licenses/cc-by“，”version“：”publishedVersion“，”is_accepted“：true，”is_published“：true}，{”is_oa“：false，”landing_page_url“：”https://doaj.org/article/c0662bbd367f43fe878343e2dd2bb3d5“，”pdf_url“：空，”源“：{”id“：”https://openalex.org/S4306401280“，”display_name“：”DOAJ（DOAJ：开放存取期刊目录）“，”issn_l“：null，”issn“：null:”is_oa“：true，”is_in_DOAJ“：false，”host_organization“：null，”host_organization_name“:null，“host_orgganization_lineage”：[]，“host_orgganization _lineage_names”：[[]，“type”：“repository”}，“license”：null、“license_id”：null、“version”：null.、“is_accepted”：false、“is_published“：false}，{”is_oa“：true，”landing_page_url“：”https://europepmc.org/articles/pmc3584292，“pdf_url”：https://europepmc.org/articles/pmc3584292？pdf=render，“源”：{“id”：https://openalex.org/S4306400806“，”display_name“：”Europe PMC（PubMed Central）“，”issn_l“：null，”issn“：null，”is_oa“：true，”is_ in_doaj“：false，”host_organization“：”https://openalex.org/I1303153112“，”“host_organization_name”：“欧洲生物信息学研究所”，“host_organization_lineage”：[“https://openalex.org/I1303153112“]，”host_organization_lineage_names“：[”欧洲生物信息学研究所“]，“type”：“repository”}，“license”：“cc-by”，“licence_id”：“https://openalex.org/licenses/cc-by“，”version“：”publishedVersion“，”is_accepted“：true，”is_published“：true}，{”is_oa“：true，”landing_page_url“：”https://www.ncbi.nlm.nih.gov/pmc/articles/PMC3584292“，”pdf_url“：空，”源“：{”id“：”https://openalex.org/S2764455111“，”display_name“：”PubMed Central“，”issn_l“：null，”issn“：null，”is_oa“：true，”is_ in_doaj“：false，”host_organization“：”https://openalex.org/I1299303238“，”host_organization_name“：”美国国立卫生研究院“，”host_organization_lineage“：[”https://openalex.org/I1299303238“]，”host_organization_lineage_names“：[”National Institutes of Health“]，“type”：“repository”}，“license”：null，“licence_id”：null，“version”：“publishedVersion”，“is_accepted”：true，“is_published”：true}，{“is_oa”：false，“landing_page_url”：“https://pubmed.ncbi.nlm.nih.gov/23450126“，”pdf_url“：空，”源“：{”id“：”https://openalex.org/S4306525036“，”display_name“：”PubMed“，”issn_l“：null，”issn“：null，”is_oa“：false，”is_in_doaj“：false，”host_organization“：”https://openalex.org/I1299303238“，”host_organization_name“：”美国国立卫生研究院“，”host_organization_lineage“：[”https://openalex.org/I1299303238“]，”host_organization_lineage_names“：[”National Institutes of Health“]，“type”：“repository”}，“license”：null，“licence_id”：null，“version”：null，“is_accepted”：false，“is_published”：false}]，“best_oa_location”：{“is_oa”：true，“landing_page_url”：“https://doi.org/10.3389/fnbot.2013.00003，“pdf_url”：https://www.frontiersin.org/articles/10.3389/fnbot.2013.00003/pdf，“源”：{“id”：https://openalex.org/S115606517“，”“display_name”“：”神经机器人学的前沿“，”issn_l“：”1662-5218“，”isn“：[”1662-51218“]，”is_oa“：true，”is_in_doaj“：true，”host_organization“：”https://openalex.org/P4310320527“，”“host_organization_name”：“Frontiers Media”，“host_organization_lineage”：[“https://openalex.org/P4310320527“]，”host_organization_lineage_names“：[”Frontiers Media“]，“type”：“journal”}，“license”：“cc-by”，“licence_id”：“https://openalex.org/licenses/cc-by“，”version“：”publishedVersion“，”is_accepted“：true，”is_published“：true}，”sustainable_development_goals“：[{”display_name“：”负担得起的清洁能源“，”id“：”https://metadata.un.org/sdg/7“，”score“：0.65}]，”grants“：[]，”datasets“：[]，”versions“：[】，”referenced_works_count“：22，”referrenced_works“：【”https://openalex.org/W1813659000","https://openalex.org/W1981642026","https://openalex.org/W2003512790","https://openalex.org/W2017142537","https://openalex.org/W2033771479","https://openalex.org/W2075323224","https://openalex.org/W2112164532","https://openalex.org/W2112796928","https://openalex.org/W2116064496","https://openalex.org/W2118933070","https://openalex.org/W2119902363","https://openalex.org/W2121863487","https://openalex.org/W2124175081","https://openalex.org/W2134156766","https://openalex.org/W2145805610","https://openalex.org/W2165225968","https://openalex.org/W2168342951","https://openalex.org/W2295700201","https://openalex.org/W2535652371","https://openalex.org/W2911283634","https://openalex.org/W3139377883","https://openalex.org/W3207342693“]，”related_works“：[”https://openalex.org/W4295941380","https://openalex.org/W4206669594","https://openalex.org/W3164468573","https://openalex.org/W3139193008","https://openalex.org/W3111983280","https://openalex.org/W3074294383","https://openalex.org/W2959276766","https://openalex.org/W2909304650","https://openalex.org/W260766989","https://openalex.org/W2332834113“]，”ngrams_url“：”https://api.openalex.org/works/W2150318520/ngrams网站“，”“abstract_inverted_index”：{“Free-energy”：[0]，“based”：[1,32]，“reinforction”：[2,33]，“learning”：[3,8,34,42247]，“（FERL）”：[4]，“was”：[5]，“proposed”：[6116]，“for”：[7]，“：[15]，”be“：[16]，”handled“：[17]，”by“：[18,48,58,98194214264]，”标准“：[19252]，”函数“：[20,45256261]，”近似值“：[21257]，”方法。在“：[22]，”this“：[23,83]，”study“：[24]，”we“：[25]，”propose“：[26]，”a“：[27,53,59,88182265]，“scaled”：[28]，”version“：[29]，”of“：[30,52,69,76,7910010912213214016619820221722227]，”free-energy“：[31]，”to“：[35,6613129137145159240]，”reactive“：[36]，”more“：[37,40]，”robust“中：[38]，“and”：[39136170205254]，“efficient”：[41]，“performance”。“：[43]，”动作值“：[44260]，”是“：[46,64,87112181238249262]，”近似“：[47263]，”The“：[49,67,70,77,94104110115120126133148154171188195199209215218222246259]，”负数“：[50]，”受限“：[54]，”Boltzmann“：[55,71]，”machine“：[56]，”divided“：[57]，”常量“：[60]，”scaling“：[61]，”factor“：[62]，“那个”：[63143]，“related”：[65]，“size”：[68]，“machine”：[72]，“（the”：[73]，“square”：[74]，“root”：[75]，“number”：[78]，“state”：[80224]，“nodes”：[81]，“study）。我们的“：[84]，”第一个“：[85]，”任务“：[86111180]，”数字“：[89135]，”楼层“：[90]，”网格世界“：[91]，“任务”：[92186]，“其中”：[93187258]，“状态”：[95146]，“是”：[96]，“代表”：[97]，“图像”：[99131139230]，“手写”：[101]，“数字”：[102142]，“来自”：[103]，“MNIST”：[105]，“数据”：[106]，“设置。“：[107]，”目的“：[108]，”调查“：[114]，”方法“：[117155]，”能力“：[118]，”通过“：[119]，”提取“：[121]，”任务相关“：[123]，”特征“：[124]，”隐藏“：[127]，”层，“：[128]，”集群“：[130138]，”相同“：[134149]，”不同“：[141160164196235]，”对应“：[144]，”with“：[147157251255]，”最佳“：[150]，“操作。我们“：[151]，”也“：[152]，”测试“：[153]，”稳健性“：[156]，”尊重“：[158]，”探索“：[161]，”时间表“：[162]，”即“：[163]，”设置“：[165]，”初始“：[168]，”温度“：[169172]，”折扣“：[173]，”速率“：[174]，”软最大值“：[176]，”选择。我们的“：[178]，“第二个”：[179]，“机器人”：[183189]，“视觉”：[184]，“导航”：[185]，“可以”：[190207]，“学习”：[191]，“它的”：[192]，“位置”：[193]，“颜色”：[197]，“下部”：[200]，“部分”：[20120]，“四个”：[203]，“地标”：[204]，“它”：[206]，“推断”：[208]，“正确”：[210]，“拐角”：[211]，“目标”：[212]，“面积”：[213]，“颜色”：[216]，“上部”：[219]，“地标”。“：[223]，”空格“：[225]，”由“：[226]，”二进制“：[228]，”照相机“：[229]，”with，“：[231]，”at“：[232]，”most，“：/233]，”nine“：[234]，”colors，“：-236]，”equal“：[239]，”6642“：[241]，”binary“：[242]，”states组成。对于“：[243]，“both”：[244]，“tasks，”：[245]，“performance”：[248]，“compared”：[250]，“FERL”：[253]，“two-layered”：[266]，“feedforward”：[2]，“neural”：[268]，“network.”：[269]}，“cited_by_api_url”：“https://api.openalex.org/works？filter=引用：W2150318520“，”counts_by_year“：[{”year“:2022，”cited_by_count“：1}，{”year“：2019，”cited_by_count”：1}，{“year”：2018，”citecd_by_count“：1}，”{“year”：2016，”citesd_by_count“:1}”，“年”：2015，d_date“：”2024-05-23T02:05:37.497237“，”创建日期“：”2016-06-24“}