×

DLHub(DLHub)

swMATH ID: 28738
软件作者: Ryan Chard、Zhouzhao Li、Kyle Chard、Logan Ward、Yadu Babuji、Anna Woodard、Steve Tuecke、Ben Blaiszik、Michael J.Franklin、Ian Foster
描述: DLHub:为科学服务的模型和数据。虽然机器学习(ML)领域正在迅速发展,但要实现广泛采用,“学习系统”的开发相对滞后。此外,很少有这样的系统是为了支持科学ML的特殊要求而设计的。这里我们介绍了科学数据和学习中心(DLHub),这是一个多租户系统,提供模型库和服务功能,重点关注科学应用。DLHub解决了当前系统中的两个重大缺陷。首先,它的自助服务模型存储库允许用户共享、发布、验证、再现和重用模型,并通过打包和分发模型以及所有组成组件来解决与模型再现性相关的问题。其次,它实现了可扩展的低延迟服务功能,可以利用并行和分布式计算资源,通过简单的web界面民主访问发布的模型。与其他模型服务框架不同,DLHub可以存储和服务任何与Python 3兼容的模型或处理功能,以及多功能管道。我们表明,与其他模型服务系统(包括TensorFlow serving、SageMaker和Clipper)相比,DLHub提供了更大的功能,在无需记忆和批处理的情况下具有可比的性能,并且当可以使用后两种技术时,性能显著更好。我们还描述了DLHub在科学应用中的早期使用。
主页: https://arxiv.org/abs/1811.11213
关键词: 机器学习;arXiv_cs.LG公司;集群计算;arXiv_cs.DC公司;arXiv_状态ML;数据和学习中心;学习系统;模特服务
相关软件: 蟒蛇;帕塞尔;零MQ;TensorFlow公司;AFLOW-ML公司;库贝弗洛;铺层工人;脓原;朱庇特;基波伊;自动MOMML;卡费;Scikit公司;凯拉斯;;FireWorks公司;斯威夫特;PyCOMPS公司;佩加索斯;路易吉
引用于: 0出版物

标准条款

1出版物描述软件 年份
DLHub:为科学服务的模型和数据
Ryan Chard、Zhouzhao Li、Kyle Chard、Logan Ward、Yadu Babuji、Anna Woodard、Steve Tuecke、Ben Blaiszik、Michael J.Franklin、Ian Foster
2018