×

蒂亚诺-MPI

swMATH ID: 15169
软件作者: 何马、费毛、格雷厄姆·泰勒
描述: 用于训练Theano中构建的深度学习模型的MPI并行框架。Theano-MPI是一个分布式框架,用于训练在Theano构建的基于数据并行的深度学习模型。数据并行通过两种方式实现:批量同步并行和弹性平均SGD。该项目是theano_alexnet的扩展,旨在将培训框架扩展到8个以上GPU并跨节点。有关实施细节的概述,请参阅本技术报告。它与不同框架库中构建的训练模型兼容,例如千层面、Keras、Blocks,只要其模型参数可以公开为theano共享变量。有关详细信息,请参阅lib/base/models/。或者,您可以使用基本的无张量操作从头开始构建自己的模型,并将模型参数公开为无共享变量。有关构建自定义神经网络的教程,请参阅wiki。
主页: https://github.com/uoguelph-mlg/Theano-MPI网址
源代码:  https://github.com/uoguelph-mlrg/Theano-MPI网站
依赖项: 西雅娜
引用于: 0个文档