{“状态”:“确定”,“消息类型”:“工作”,“信息版本”:“1.0.0”,“邮件”:{“索引”:{“日期-部件”:[[2023,9,12],“日期-时间”:“2023-09-12T15:11:17Z”,“时间戳”:169453147770},“引用-计数”:51,“出版商”:“威利”,“问题”:“20”,“许可证”:[{“开始”:{-“日期-零件”:[2016,4,28]],“日期时间”:”2016-04-2 8T00:00:00Z“,”时间戳“:1461801600000},“content-version”:“vor”,“delay-in-days”:0,“URL”:“http://\/onlinelibrary.wiley.com/termsAndConditions#vor”}],“content-domain”:{“domain”:[],“crossmark-restriction”:false},“short-container-title”:[“Concurrency and Computation”],“published-print”:{“date-parts”:[[2017,10,25]},”abstract“:”摘要<\/jats:title>MapReduce已成为云计算环境中数据密集型应用程序的主要编程模型。Hadoop是MapReduce的一个开源实现,已经被越来越广泛的用户社区所采用。然而,由于Hadoop的同构设计重点,它在异构环境中的任务调度性能会下降。本文介绍了gSched,一个支持资源\u2010的Hadoop调度器,它在云计算环境中的任务分配中考虑了计算资源的异构性和供应费用。gSched最初是在一个实验性的Hadoop集群中进行评估的,与默认Hadoop调度器相比,它的性能得到了增强。在Amazon EC2云上进行了进一步的评估,证明了gSched在异构云计算环境中任务分配的有效性。版权所有\u00a9 2016 John Wiley&Sons,LtdgSched:异构云计算环境的资源感知Hadoop调度器“],”前缀“:”10.1002“,”卷“:”29“,”作者“:[{”给定“:”Godwin“,”家族“:”Caruana“,”序列“:”first“,”affiliation“:[}”name“:”Brunel University London Uxbridge UB8\u20093PH UK“}]},{”given“:”Maozhen“,”family“:”Li”,“sequence”:“additional”,“affiliation”:[{“name”:“电子与计算机工程系布鲁内尔大学伦敦Uxbridge UB8\u20093PH UK”},{“name”:“江苏大学计算机科学与通信工程学院中国镇江212013”},{“given”:“Man”,“family”:“Qi”,“sequence”:“additional”,“affiliation”:[{“name”:“坎特伯雷基督教堂大学计算机系坎特伯里肯特分校CT1\u20091QU UK“}]},{“given”:“Mukhtaj”,“family”:“Khan”,“sequence”:“additional”,“affiliation”:[{“name”:“Department of Computer Science Abdul Wali Khan University Mardan Mardan Pakistan”}]},}“giving”:“Omer”,“家庭”:“Rana”,“sequence”:“additionable”,“从属关系”:[[{”name“:”加的夫大学计算机科学与信息学院CF24\u20093XF UK“}]}],“member”:“311”,“published-on-line”:{“date-parts”:[[2016,4,28]]},“reference”:[{“key”:“e_1_2_6_2_1”,“unstructured”:“\u2018Forrester research \u2013 size the cloud\u2019。[在线]。可访问:http://www.forrester.com/Sizing+The+Cloud\/fulltext\/\u2010\/E\u2010RES58161?objectid=RES58161。[访问时间:14\u2010Dec\u20102012]。“},{”key“:”e_1_2_6_3_1“,”unstructured“:”\u2018What is AWS?\u2019[联机]。可用:http://\/AWS.amazon.com/what\u2010is\u2010aws\/。[访问时间:09\u2010March\u20102015]。“}”,{“key”:“e_1_c_6_4_1”,“unstructure”:“\u2018功能:Windows Azure简介\u2019。[在线]。可访问:http://www.windowsazure.com\/en\u2010us\/home\/features\/overview\/。[访问时间:09\u2010-March\u2010-2015]。“},{”key“:”e_1_2_6_5_1“,”非结构化“:”\u2018Google云平台\u2019。[在线]。可用:https:\/\/cloud.google.com//。[访问时间:09\u2010-March\u2010-2015]。“},{”key“:”e_1_2_6_6_1“,”doi-asserted-by“:”crossref“,“unstructured”:“A.Wieder P.Bhatotia A.Post R.Rodrigues.\u2018rief announcement:modeling MapReduce for optimal execution in the cloud 2019 in the Proceedings of the 29届ACM SIGACT\u2010SIGOPS分布式计算原理研讨会2010 pp.408\u2013409.”,“doi”:“10.1145\/1835698.1835795”},{“key”:“e_1_2_6_7_1”,“doi-asserted-by”:“publisher”,”doi“:”10.1007\/978-3642-03864-8_6“},{”key“:”e_1_i_6_8_1“,”首页“:”195“,“article-title”:“混合云环境下商业软件应用程序部署的经济决策模型”,“volume”:”2010“,”author“:”Strebel J“,”年份“:”2010年“,”日志标题“:“Multikonferenz-Wirtschaftsinformatik”},{“key”:“e_1_2_6_9_1”,“首页”:“1563”,“article-title”:“云计算服务的成本核算:总拥有成本方法”,“volume”:”0“,“author”:“Martens B”,“year”:“2012”,“journal-title“:”Hawaii Int.Conf.Syst.Sci:“10.1145\/1327452.1327492”},{“key”:“e_1_2_6_11_1”,“doi-asserted-by”:“crossref”,“unstructured”:“B.He W.Fang Q.Luo N.K.Govindaraju and T.Wang\u2018Mars:图形处理器MapReduce框架\u2019年第17届并行架构和编译技术国际会议论文集\u2013 PACT'08 2008年第260页。”,“doi”:“10.1145\/1454115.1454152”},{“key”:“e_1_2_6_12_1”,“doi-asserted-by”:“publisher”,“doi”:“10.145\/966049.781533”}、{“密钥”:“e_1_2_6_13_1”,”volume-title“:“Hadoop:The Definitive Guide”,“author”:“White T”,“year”:“2009”}“10.5121\/ijdps.2012.3411”},{“key”:“e_1_2_6_15_1”,“首页”:“6”,“article-title”:“云计算中异构Hadoop集群的性能问题”,“author”:“Rao BT”,“year”:“2012”,“journal-title“:”Glob.J.Compute.Sci.Technol.“},{“key”:“e_1_2_6_16_1”,”doi-asserted-by“:”publisher“,”doi“:”10.1145\/2189750.984“}”,{”key“:”e_2_6/17_1“,“doi-assert-by”:“publisher”,《doi》:“10.1145”\/1807128.1807150“},{”键“:“e_1_2_6_18_1”,“doi-asserted-by”:“publisher”,”doi“:”10.1145\/2213836.2213840“},{“key”:“e_ 1_2_ 6_19_1”、“unstructured”:“e.Bortnikov A.Frank e.Hillel S.Rao\u2018预测map\u2010reduce clusters\u2019在HotCloud中的执行瓶颈:2012年云计算热点问题第四届USENIX会议论文集第18页。”},“doi-asserted-by”:“crossref”,“unstructured”:“J.XiaoZ.Xiao\u2018High\u2010integrity MapReduce云计算与推测执行2019年计算机科学理论与数学基础。第二届国际会议ICTMF 2011新加坡2011年5月5日\u20136。论文选。柏林:Springer 2011 pp.397\u2013404。”,“doi”:“10.1007\/978-3-642-24999-0_55”},{“key”:“e_1_2_6_21_1”,“doi-asserted-by”:“publisher”,“doi”:“10.1109\/71.888636”}:“T.SandholmK.Lai\u2018JSSPP’10第15届并行处理作业调度策略国际会议论文集2010 pp.110\u2013131.”,“DOI”:“10.1007\/978-3642-16505-4_7”},{“key”:“e_1_2_6_23_1”,“DOI-asserted-by”:“crossref”,”unstructured“:“K.KcandK.Anyanwu\u2018在2010年IEEE第二届云计算技术与科学国际会议上安排Hadoop作业以满足截止日期\u2019,2010年第388\u2013392页。”,“DOI”:“10.1109\/CloudCom.2010.97”},{“key”:“e_1_2_6_24_1”,“DOI-asserted-by”:“publisher”,”DOI“:“10.1145\/1531793.1531800”}、{“key”:”e_2_6-25_1“,”DOI-assert-by“:“crossref”,“unstructured”:“C.Tian H.Zhou Y.He L.Zha.第八届网格与协同计算国际会议2009年第218\u2013224.”,“DOI”:“10.1109\/GCC.2009.19”},{“key”:“e_1_2_6_26_1”,”unstructure“:“D.Gillick A.Faria J.DeNero\u2018MapReduce:机器学习的分布式计算\u2019 2006。[在线]。可用:http://\/cs.smith.edu\/dftwiki\/images\/6\/68\/MapReduceDistributedComputingMachineLearning.pdf。[访问时间:09\u2010-March\u2010-2015]。“},{”key“:”e_1_2_6_27_1“,”unstructured“:”Z.Ma L.Gu和L.G.Zhiqiang Ma.MapReduce的局限性:一个探索性案例和一个轻量级解决方案。2010年第一届国际云计算网格与虚拟化大会In Proc.第68\u201373页。“}Z.郭安国。狐狸。在集群云和网格计算(CCGrid)中提高MapReduce在异构网络环境中的性能和资源利用率2012第12届IEEE/ACM国际研讨会,第714\u2013716页。“},{”key“:”e_1_2_6_29_1“,”非结构化“:”G.Lee B.\u2010G。Chun H.Katz\u2018Heteriogenity\u2010aware resource allocation and scheduling in the cloud\u2019 in HotCloud’11第三届USENIX大会2011年云计算热点会议论文集第4页。“},{”key“:”e_1_2_6_30_1“,”first page“:“29”,“article-title”:“改善异构环境中的MapReduce性能”,“author”:“Zaharia M”,“year”:“2008年”,“journal-title”:“OSDI”},{“key”:“e_1_2_6_31_1”,“unstructured”:“M.B.YongChul Kwon Y.Kwon M.Balazinska B.Howe J.Rolia.MapReduce应用程序中歪斜的研究,2012年国际数据管理会议论文集\u2013 SIGMOD'12 2012年第25页。”}10.1007 \/978-1-2471-2909-7“},{“key”:“e_1_2_6_33_1”,“doi-asserted-by”:“publisher”,”doi“:”10.1016\/j.asoc.2010.11.029“}”,{”key“:”e_1_i_6_34_1“,”doi-assert-by“:”publisher“,“doi”:“10.1016\/jpdc.2011.05.005”},“key“:”e_2_6m_35_1“”,“unstructured”:“T.Aarnio使用Map并行数据处理ReduceTKK T\u2010110.5190 2009年互联网研讨会。[在线]。网址:http://www.cse.tkk.fi\/en\/publications\/B\/5\/paperss\/Aarnio_final.pdf[访问时间:09\u2010March\u20102015]。“},{”key“:”e_1_2_6_36_1“,”doi-asserted-by“:”crossref“,“unstructured”:“J.Dean\u2018MapReduce对大型计算的抽象体验\u2010scale computer\u2019 PACT'06 Proc.15th Int.Conf.Parallel Archit.Compile.Tech.pp.1\u20131 2006.”,“doi”:“10.1145\/1152154.1152155”},“key”:“e_2_6.37_1”,“doi-assert-by”:“publisher”,”doi“:”10.1145\/1656274.1656278“},{“key”:“e_1_2_6_38_1”,“unstructured”:“Z.Ou H.Zhuang J.K.Nurminen A.Yl\u00e4\u2010J\u00e_4\u00e4ski P.Hui.利用同一实例类型的Amazon EC2中的硬件异构性第四届USENIX云计算热门话题研讨会第4页,2012年6月4日\u2018亚马逊EC2实例类型\u2019。[在线]。可用:http://\/aws.amazon.com//ec2\/instance\u2010types\/[访问时间:09\u2010March\u20102015]。“},{”key“:”e_1_2_6_40_1“,”doi-asserted-by“:”publisher“,“doi”:“10.1109\/FSKD.2010.5569282”},“key”:“e_1_i_6_41_1”,“doi-assert-by”:“publisher”,”doi“:”10.1016\/j.neucom.2012.001“}”,{A“,”年份“:“2010”},{“key”:“e_1_2_6_43_1”,“doi-asserted-by”:“publisher“,”DOI“:”10.1109\/FSKD.2011.6020074“},{“key”:“e_1_2_6_44_1”,“DOI-asserted-by”:“publisher”,”DOI:“10.1109\/TNN.2006.875989”},“key“:”e_1_i_6_45_1B.帕拉尼萨米A.辛格L.刘和B。Jain\u2018Purlieus\u2019,《2011年高性能计算网络存储与分析国际会议论文集》,SC'11 2011第1页,“DOI”:“10.1145\/2063384.2063462”},{“key”:“e_1_2_6_46_1”,“DOI-asserted-by”:“crossref”,”unstructured“:”S.Kavulya J.Tan R.Gandhi P.Narasimhan \u20182010年第十届IEEE \/ACM国际集群云计算和网格计算会议2010年第94\u2013103页“,”DOI“:”10.1109\/CCGRID.2010.112“},{”key“:”e_1_2_6_47_1“,”DOI-asserted-by“:”crossref“,“unstructured”:“Z.Zhang L.Cherkasova B。T.Loo\u2018利用云异构性优化MapReduce处理的性能和成本\u2019,《第四届云数据与平台国际研讨会论文集2014》第1页\u20136.“,”DOI“:”10.1145\/2592784.2592785“},{”key“:”e_1_2_6_48_1“,”DOI断言“:”publisher“,”DOI“:”10.1109\/TPDS.2014.2385698“},”key“:”e_1_2_6_49_1“,”doi-asserted-by“:”publisher“,”doi“:”10.1016\/j.jpdc.2013.05.005“},{“key”:“e_1_2_6_50_1”,“doi-assert-by”:“publisher”、“doi”:“10.1016\/j.future.2014.08.011”}、{“key”:”e_1_i_6_51_1“,“doi”:“publisher”,“doi“,”文章标题“:”在异构集群系统上调度优先级受限的随机任务“,”author“:”Li K.“,”year“:”2013“,”journal-title“:”IEEE Transactions on Computers“}],”container-title”:[“Concurrency and Computation:Practice and Experience”],”original-title:[],”language“:”en“,”link“:[{”URL“:”https:\/\/api.wiley.com//onlinelibrary\/tdm\/v1\/articles \/10.1002%2Fcpe.3841“,”content-type“:”application\/pdf“,”内容版本“:”vor“,”intended-application“:”text-mining“},{”URL“:”https:\//\/api.wiley.com\/onlinelibrary\/tdm \/v1\/articles\/10.10002%2Fcpe.3841“,”content-type”:“未指定”,“content-version”:“vor“,”预期应用程序“:”text-mining“},{“URL”:“https:\/\/onlinelibrary.wiley.com/doi\/pdf\/101002\/cpe.3841”,“content-type”:“未指定”,“内容-版本”:“vor”,“intended-application”:“相似性检查”}],“存放”:{“日期-部件”:[2023,9,11]],“日期-时间”:“2023-09-11T22:25:54Z”,“时间戳”:1694471154000},“分数”:1,“资源”:{“主要”:{“URL”:“https:\/\/onlinelibrary.wiley.com/doi\/10.1002\/cpe.3841“}},”副标题“:[],”短标题“:[],”已发布“:{”日期部分“:[[2016,4,28]]},“参考计数”:51,”日志发布“:”发布“:URL“:”http://\/dx.doi.org\/10.1002\/cpe.3841“,”存档“:[”Portico“],”关系“:{},”ISSN“:[”1532-0626“,”1532-0.634“],”ISSN-type“:[{”value“:”1532-00626“,“type”:“print”},{”value“:“1532-0634”,“type”:“electronic”}],“subject”:[],“published”:{“date-parts”:[2016,4,28]}}}}