×

元调度器CSF4中用于生命科学应用程序的自定义插件模块。 (英语) Zbl 1147.68342号

摘要:随着越来越多的生命科学研究人员开始在其工作中利用网格技术,对健壮但易于使用的元调度程序或资源代理的需求也在增加。在本文中,我们扩展了元调度程序CSF4,通过提供虚拟作业模型(VJM)来同步跨域并行作业的资源协同分配。VJM消除了死锁,并提高了使用MPICH-G2编译的多集群并行应用程序的资源使用率。利用CSF4的可扩展调度器插件模型,可以为生命科学应用程序开发定制的元调度策略。例如,为AutoDock和Blast等令人愉快的并行应用程序开发了一个数组作业调度程序插件。通过使用Gfarm数据网格测试床对mpiBLAST-g2进行实验,评估了VJM的性能。此外,还发布了一个CSF4 portlet,以提供用于透明网格访问的图形用户界面,并使用Gfarm进行数据暂存和简化数据管理。该平台是source-forge.net/projects/gcsf/上的开源平台,已由My WorkSphere和PRAGMA Biosciences Portal等项目部署在生命科学网关中。VJM能够在不久的将来开发对更复杂的工作流和元调度策略的支持

MSC公司:

68M10个 计算机系统中的网络设计和通信
68平方米 计算机系统中的性能评估、排队和调度
PDF格式BibTeX公司 XML格式引用
全文: 内政部

参考文献:

[1] Karonis,N.T.、Toonen,B.和Foster,I.,“MPICH-G2:消息传递接口的网格化实现”,《并行与分布式计算杂志》,2003年·Zbl 1059.68526号
[2] Abramson,D.、Giddy,J.和Kotler,L.,“使用Nimrod/G的高性能参数建模:全球电网的Killer应用”,IPDPS,2000年。
[3] Wei,X.、Ding,Z.和Yuan,S.,“CSF4:符合WSRF的元调度程序”,《网格计算和应用国际会议06》,2006年6月26-29日。
[4] Goodsell,D.S.、Morris,G.M.和Olson,A.J.,“柔性配体的自动对接:AutoDock的应用”,J.Mol Recognit,第9卷,第1-5页,1996年·doi:10.1002/(SICI)1099-1352(199601)9:1<1::AID-JMR241>3.0.CO;2-6
[5] Altschul,S.F.,Madden,T.L.,Schaffer,A.A.,Zhang,J.,Z.,Miller,W.和Lipman,D.J.,“缺口BLAST和PSI-BLAST:新一代蛋白质数据库搜索程序”,《核酸研究》,第25卷,第3389-4021997页·doi:10.1093/nar/25.17.3389
[6] Li,W.W.,Krishnan,S.,Mueller,K.,Ichikawa,K.、Date,S.、Dallakyan,S.和Sanner,M.、Misleh,C.、Ding,Z.、Wei,X.、Tatebe,O.和Arzberger,P.W.,“使用面向服务的架构构建生物信息学的网络基础设施”,第六届IEEE国际交响乐会。2006年新加坡集群计算和网格研讨会。
[7] Uthayopas,P.、Maneesilp,J.和Ingongnam,P.,“SCMS:Beowulf集群系统的集成集群管理工具”,Proc。《并行和分布式处理技术及应用国际会议》,2000年。
[8] Foster,I.,“Globus工具包第4版:面向服务系统的软件”,LNCS,3779,第2-13页,2006年。
[9] 全球联盟“全球”网址:http://www.globus.org , 2004.
[10] Li,W.W.、Baker,N.A.Baldridge,K.、McCammon,J.A.、Ellisman、M.H.Gupta,A.、Holst,M.J.、McCulloch,A.D.、Michailova,A.,Papadopoulos,P.、Olson,A.Sanner,M.和Arzberger,P.W.,“国家生物医学计算资源(NBCR):为生物医学研究中的多尺度建模开发端到端网络基础设施”,《CTWatch季刊》,第2页,第6-17页,2006年。
[11] Tatebe,O.、Morita,Y.和Matsuoka,S.,“Petascale数据密集型计算的网格数据场架构”,Proc。第二届IEEE/ACM国际研讨会。《集群计算和网格》,2002年,第102-110页。
[12] Geist,A.,Beguelin,A.,Dongarra,J.,Jiang,W.,Manchek,B.和Sunderam,V.,PVM:并行虚拟机——网络并行计算用户指南和教程,麻省理工学院出版社,马萨诸塞州剑桥,1994年·Zbl 0849.68032号
[13] 消息传递接口论坛,“MPI:消息传递接口标准”,国际超级计算机杂志。申请。8(3/4), 165-414, 1994.
[14] Czajkowski,K.,Foster,I.,Kesselman,C.,Sander,V.和Tuecke,S.,“SNAP:分布式系统中协商服务级别协议和协调资源管理的协议”,LNCS,2537,pp.153-1832002·Zbl 1024.68682号
[15] Complutense大学分布式体系结构小组,“Gridway”http://www.gridway.org网站/ , 2006.
[16] Cluster Resources,Inc.“银色设计规范”http://www.supercluster.org/projects/silver/2004年1月。
[17] Frey,J.、Tannenbaum,T.、Livny,M.、Foster,I.和Tuecke,S.,“Condor-G:多机构网格的计算管理代理”,《集群计算杂志》,2002年7月5日、3日。
[18] 2005年岩石群分布,网址:http://www.rocksclusters.org .
[19] 国家生物医学计算资源,2005年,网址:http://nbcr.net .
[20] Massie,M.L.、Chun,B.N.和Culler,D.E.,“神经节分布式监控系统:设计、实现和经验”,《并行计算》,第30期,第817-840页,2004年·doi:10.1016/j.parco.2004.04.001
[21] Foster,I.、Kesselman,C.、Lee,C.、Lindell,R、Nahrstedt,K.和Roy,A.,“支持提前预订和协同分配的分布式资源管理体系结构”,《服务质量国际研讨会》,1999年。
[22] “网格球”http://www.gridsphere.org , 2004.
[23] Bhatia,K.、Chandra,S.和Mueller,K.,“GAMA:网格帐户管理体系结构”,第一届IEEE电子科学和网格计算国际会议,2006年。
[24] Krishnan,S.、Stearn,B.、Bhatia,K.、Baldridge,K.and Li,W.W.等人,《Opal:科学应用的简单Web服务包装》,Web服务国际会议,2006年。
[25] von Laszewski,G.,Foster,I.,Gawor,J.和Lane,P.,“Java商品网格工具包”,并发与计算:实践与经验,第13期,第643-6622001页·Zbl 0984.68583号 ·doi:10.1002/cpe.574
[26] Ding,Z.,Luo,Y.,Wei,X.,Misleh,C.,Li,W.W.,Arzberger,P.W.和Tatebe,O,“我的工作空间:通过具有元调度器CSF4的GridSphere门户对Gfarm计算数据网格的集成和透明访问”,第三届国际生命科学网格研讨会,2006年。
[27] Allcock,W.、Bester,J.、Bresnahan,J.,Chervenak,A.、Liming,L.和Tuecke,S.,“网格FTP:网格FTP的协议扩展,网格论坛Internet-Draft”,2001年。
[28] Novotny,J.、Tuecke,S.和Welch,V.,“网格在线凭证库:MyProxy”,高性能分布式计算,2001年
[29] “环太平洋应用程序和网格中间件组装”,2004年,网址:http://www.pragma-grid.net/ .
[30] Darling,A.,“mpiBLAST的设计、实现和评估”,ClusterWorld,2003年。
[31] “先进海洋微生物生态学研究和分析的社区网络基础设施”,2006年,网址:http://camera.calit2.net/ .
[32] “TeraGrid”,2004年,网址:http://www.teragrid.org .
[33] “开放科学网格”,2006年,http://www.opensciencegrid.org/ .
此参考列表基于出版商或数字数学图书馆提供的信息。它的项目与zbMATH标识符启发式匹配,并且可能包含数据转换错误。在某些情况下,zbMATH Open的数据对这些数据进行了补充/增强。这试图尽可能准确地反映原始论文中列出的参考文献,而不要求完整或完全匹配。