×

G-Hadoop中的一个安全框架,用于跨分布式云数据中心的大数据计算。 (英语) Zbl 1310.68043号

摘要:MapReduce被认为是一个适合大规模数据密集型应用程序的编程模型。Hadoop框架是一个众所周知的MapReduce实现,它在集群系统上运行MapReduceTasks。G-Hadoop是Hadoop MapReduce框架的扩展,其功能是允许MapReducer任务在多个集群上运行。然而,G-Hadoop只是重复使用Hadoop的用户身份验证和作业提交机制,该机制是为单个集群设计的。本文提出了一种新的G-Hadoop安全模型。该安全模型基于公钥加密和SSL协议等多种安全解决方案,专门为分布式环境设计。此安全框架通过单点登录方法简化了当前G-Hadoop实现的用户身份验证和作业提交过程。此外,设计的安全框架提供了许多不同的安全机制,以保护G-Hadoop系统免受传统攻击。

MSC公司:

64岁以下 分布式系统
68个P01 数据理论的一般主题
PDF格式BibTeX公司 XML格式引用
全文: 内政部

参考文献:

[1] Apache Hadoop项目,网页
[2] Chakrabarti,A.,网格计算安全(2007),Springer·Zbl 1178.68026号
[3] 杰弗里·迪恩;Ghemawat、Sanjay、MapReduce:大型集群上的简化数据处理,Commun。ACM,51,107-113(2008年1月)
[4] 亚当·杜(Adam Dou);瓦纳卡洛格拉基;Gunopulos,Dimitrios;米利凯宁,塔内利;Tuulos,Ville H.,Misco:移动系统的MapReduce框架,(第三届与辅助环境相关的普及技术国际会议论文集,PETRA’10(2010),ACM:美国纽约州纽约市ACM),32:1-32:8
[5] 格洛布斯。电网安全基础设施概述(2014年),网址:
[6] 郭思杰;熊、金;王卫平;Mastiff,Rubao Lee,基于MapReduce的基于时间的大数据分析系统,(2012 IEEE集群计算国际会议(2012)),72-80
[7] 何炳胜;方文斌;罗琼;纳加·K·戈文达拉朱。;Wang,Tuyong,Mars:图形处理器上的MapReduce框架,(第17届并行架构和编译技术国际会议论文集,PACT’08(2008),ACM:ACM纽约,纽约,美国),260-269
[8] 易卜拉欣、沙迪;金海;程斌;曹海军;吴松;Qi,Li,CLOUDLET:在虚拟机上实现MapReduce,(第18届ACM高性能分布式计算国际研讨会论文集,HPDC’09(2009),ACM:美国纽约州纽约市ACM),65-66
[9] 乔安娜·科洛德齐耶(Joanna Kolodziej);Xhafa,Fatos,独立批处理网格调度的基于遗传算法的元神经系统中任务中止和安全要求的集成,计算。数学。申请。,63, 2, 350-364 (2012) ·Zbl 1238.68042号
[10] 林和山;马晓松;杰里米·阿楚利塔;冯、吴聪;马克·加德纳(Mark Gardner);Zhang,Zhe,MOON:MapReduce On Opportunistic eNvironments,(第19届ACM高性能分布式计算国际研讨会论文集,HPDC’10(2010),ACM:美国纽约州纽约市ACM),95-106
[11] 科尔比流浪者;拉马南·拉古拉曼;阿伦·彭梅萨;加里·布拉德斯基;Christos Kozyrakis,《评估多核和多处理器系统的MapReduce》(2007年IEEE第13届高性能计算机体系结构国际研讨会论文集,IEEE计算机学会:IEEE计算机协会,美国华盛顿特区),13-24
[12] 拉吉夫·兰扬;亚伦·哈伍德;Buyya,Rajkumar,对等耦合联邦电网系统中的协调负载管理,J.Supercomput。,61, 2, 292-316 (2012)
[13] 拉吉夫·兰扬;卡兰·米特拉(Karan Mitra);Georgakopoulos、Dimitrios、MediaWise云内容协调器、J.Internet Serv。申请。,4, 1, 1-14 (2013)
[14] Rescorla,Eric,SSL和TLS设计和构建安全系统(2002),Addison-Wesley
[15] 罗伯特·谢弗(Robert Schaefer);Aleksander Byrski;乔安娜·科洛德齐耶(Joanna Kolodziej);Smolka,Maciej,基于代理的分层遗传搜索模型,计算。数学。申请。,64, 12, 3763-3776 (2012) ·Zbl 1268.68141号
[16] 掸、易;王波;严静;王,余;徐宁义;Yang,Huazhong,FPMR:FPGA上的MapReduce框架,(第18届ACM/SIGDA现场可编程门阵列国际研讨会论文集,FPGA’10(2010),ACM:ACM纽约,美国纽约),93-102
[17] 宋维京;岳、沙沙;王丽芝;张万峰;Liu,Dingsheng,跨分布式数据中心大规模空间数据处理的任务调度:新增功能?,(IEEE第17届并行和分布式系统国际会议(2011)),976-981
[18] 唐冰;莫卡、米尔恰;谢瓦利埃,斯蒂芬;何海武;Fedak,Gilles,Towards MapReduce for Desktop Grid computing,(2010年P2P、并行、网格、云和互联网计算国际会议论文集,3PGCIC’10(2010),IEEE Computer Society:IEEE Compute Socility Washington,DC,USA),193-200
[19] 奥萨姆·塔特贝;平贺、小平;Soda、Noriyuki、Gfarm Grid文件系统、新一代。计算。,28, 3, 257-275 (2010) ·Zbl 1205.68058号
[20] 王丽芝;陈丹;邓泽;Huang,Fang,Review:计算网格上的大规模分布式可视化:综述,计算。选举人。工程师,37、4、403-416(2011年7月)
[21] 王丽芝;陈丹;胡阳阳;马,燕;Wang,Jian,《将网络基础设施作为云服务实现》,计算。选举人。工程师,39,1,3-14(2013年1月)
[22] 王丽芝;陈丹;黄,方,网格上分布式协同科学应用的虚拟工作流系统,计算。选举人。工程,37,3,300-310(2011)
[23] 王丽芝;陈丹;赵家琦;Tao,Jie,分布式虚拟机的资源管理,Int.J.Ad Hoc Ubiq.Compute。,10、2、96-111(2012年7月)
[24] 王丽芝;Marcel Kunze;陶杰;von Laszewski,Gregor,《为科学应用构建云》,高级工程师软件。,42, 9, 714-722 (2011)
[25] 王丽芝;陶杰;拉吉夫·兰扬;马滕·霍尔格(Marten,Holger);阿希姆·斯特里特;陈晶莹;Chen,Dan,G-Hadoop:MapReduce跨分布式数据中心进行数据密集型计算,Future Gener。计算。系统。,29,3739-750(2013年3月)
[26] 王丽芝;冯·拉舍夫斯基(von Laszewski),格雷戈(Gregor);陶杰;Kunze,Marcel,计算网格中分布式虚拟机上的虚拟数据系统,Int.J.Ad Hoc Ubiq.Compute。,6, 4, 194-204 (2010)
[27] 王丽芝;冯·拉舍夫斯基(von Laszewski),格雷戈(Gregor);安德鲁·杨格(Andrew J.Younge)。;何熙;马塞尔·昆泽;陶杰;Fu,Cheng,《云计算:透视研究》,《新世代》。计算。,28, 2, 137-146 (2010) ·兹比尔1192.68085
[28] 张万峰;王丽芝;宋维京;马、严;刘定生;刘鹏;Chen,Dan,为大规模遥感图像处理构建多数据中心基础设施,Concurr。计算:实际。专家。,25, 12, 1798-1812 (2013)
此参考列表基于出版商或数字数学图书馆提供的信息。它的项目与zbMATH标识符启发式匹配,并且可能包含数据转换错误。在某些情况下,zbMATH Open的数据对这些数据进行了补充/增强。这试图尽可能准确地反映原始论文中列出的参考文献,而不要求完整或完全匹配。