随笔分类 -  001_机器学习

上一页 1 ··· 3 4 5 6 7 8 9 10 下一页
摘要:Paracel是豆瓣开发的一个分布式计算框架,它基于参数服务器范式来解决机器学习的问题。本文主要分析其SSP的实现。 阅读全文
posted @ 2021-08-13 20:16 罗西的思考 阅读(620) 评论(0) 推荐(0) 编辑
摘要:Paracel是豆瓣开发的一个分布式计算框架,它基于参数服务器范式来解决机器学习的问题,本文介绍其主体结构。 阅读全文
posted @ 2021-08-10 19:26 罗西的思考 阅读(605) 评论(0) 推荐(0) 编辑
摘要:本文是参数服务器的第四篇,介绍KVWorker, KVServer。 阅读全文
posted @ 2021-08-07 10:31 罗西的思考 阅读(649) 评论(0) 推荐(0) 编辑
摘要:本文是参数服务器第三篇,介绍ps-lite的Customer模块。 阅读全文
posted @ 2021-08-04 20:26 罗西的思考 阅读(841) 评论(0) 推荐(0) 编辑
摘要:本文是参数服务器系列第二篇,介绍ps-lite的通信模块 Van。 阅读全文
posted @ 2021-08-02 20:11 罗西的思考 阅读(1019) 评论(0) 推荐(0) 编辑
摘要:参数服务器是机器学习训练一种范式,是为了解决分布式机器学习问题的一个编程框架。本文是参数服务器系列第一篇,介绍ps-lite的总体设计和基础模块 Postoffice。 阅读全文
posted @ 2021-07-30 15:40 罗西的思考 阅读(2186) 评论(0) 推荐(0) 编辑
摘要:本文是 horovod on k8s 的最后一篇,看看 MPI-Operator 可能被如何改进。 阅读全文
posted @ 2021-07-28 19:43 罗西的思考 阅读(887) 评论(0) 推荐(0) 编辑
摘要:Horovod 是一款基于 AllReduce 的分布式训练框架。本文是 Horovod on k8s 第二篇,介绍MPI-Operator。 阅读全文
posted @ 2021-07-26 14:21 罗西的思考 阅读(2270) 评论(0) 推荐(0) 编辑
摘要:Horovod 是一款基于 AllReduce 的分布式训练框架。本文是 Horovod on k8s 第一篇,介绍kubeflow tf-operator。 阅读全文
posted @ 2021-07-23 17:02 罗西的思考 阅读(1690) 评论(0) 推荐(0) 编辑
摘要:Horovod 是Uber于2017年发布的一个易于使用的高性能的分布式训练框架,在业界得到了广泛应用。本系列将通过源码分析来带领大家了解 Horovod。本文是系列第十七篇,看看horovod 的容错机制。 阅读全文
posted @ 2021-07-21 20:29 罗西的思考 阅读(932) 评论(4) 推荐(0) 编辑
摘要:Horovod 是Uber于2017年发布的一个易于使用的高性能的分布式训练框架,在业界得到了广泛应用。本系列将通过源码分析来带领大家了解 Horovod。本文是第十六篇,看看 horovod **弹性训练**中 worker 的生命周期。 阅读全文
posted @ 2021-07-19 20:19 罗西的思考 阅读(643) 评论(2) 推荐(0) 编辑
摘要:Horovod 是Uber于2017年发布的一个易于使用的高性能的分布式训练框架,在业界得到了广泛应用。本系列将通过源码分析来带领大家了解 Horovod。本文是系列第十五篇,看看horovod 弹性训练如何广播和发送通知。 阅读全文
posted @ 2021-07-16 20:24 罗西的思考 阅读(820) 评论(0) 推荐(0) 编辑
摘要:Horovod 是Uber于2017年发布的一个易于使用的高性能的分布式训练框架,在业界得到了广泛应用。本系列将通过源码分析来带领大家了解 Horovod。本文是系列第十四篇,看看horovod 如何动态发现节点 和 处理状态信息。 阅读全文
posted @ 2021-07-14 19:18 罗西的思考 阅读(762) 评论(1) 推荐(0) 编辑
摘要:Horovod 是Uber于2017年发布的一个易于使用的高性能的分布式训练框架,在业界得到了广泛应用。本系列将通过源码分析来带领大家了解 Horovod。本文是系列第十三篇,看看 horovod 弹性实现中 的 Driver 角色。 阅读全文
posted @ 2021-07-12 19:43 罗西的思考 阅读(813) 评论(0) 推荐(0) 编辑
摘要:Horovod 是Uber于2017年发布的一个易于使用的高性能的分布式训练框架,在业界得到了广泛应用。本系列将通过源码分析来带领大家了解 Horovod。本文是系列第十二篇,看看horovod 如何实施弹性训练。 阅读全文
posted @ 2021-07-09 21:02 罗西的思考 阅读(1364) 评论(2) 推荐(0) 编辑
摘要:Horovod 是Uber于2017年发布的一个易于使用的高性能的分布式训练框架,在业界得到了广泛应用。本系列将通过源码分析来带领大家了解 Horovod。本文是系列第十一篇,看看horovod 如何运行在 spark 之上(GLOO实现)。 阅读全文
posted @ 2021-07-07 19:22 罗西的思考 阅读(700) 评论(0) 推荐(0) 编辑
摘要:Horovod 是Uber于2017年发布的一个易于使用的高性能的分布式训练框架,在业界得到了广泛应用。本文是系列第十篇,看看horovod 如何运行在 spark 之上。 阅读全文
posted @ 2021-07-05 06:25 罗西的思考 阅读(886) 评论(0) 推荐(0) 编辑
摘要:Horovod 是Uber于2017年发布的一个易于使用的高性能的分布式训练框架,在业界得到了广泛应用。本文是系列第九篇,介绍 horovod on spark 如何启动。 阅读全文
posted @ 2021-07-03 09:01 罗西的思考 阅读(641) 评论(0) 推荐(0) 编辑
摘要:Horovod 是Uber于2017年发布的一个易于使用的高性能的分布式训练框架,在业界得到了广泛应用。本系列将通过源码分析来带领大家了解 Horovod。接下来几篇介绍 horovod 如何运行在 spark 之上。本文是第八篇,介绍 horovod on spark 的总体架构。 阅读全文
posted @ 2021-06-30 08:22 罗西的思考 阅读(1199) 评论(0) 推荐(3) 编辑

上一页 1 ··· 3 4 5 6 7 8 9 10 下一页
点击右上角即可分享
微信分享提示