会员
周边
众包
新闻
博问
闪存
赞助商
所有博客
当前博客
我的博客
我的园子
账号设置
简洁模式
...
退出登录
注册
登录
marsggbo
互道晚安,王者峡谷见
博客园
首页
新随笔
联系
订阅
管理
2024年6月26日
Deepspeed ZeRO系列算法原理+通信开销详解
摘要: 原文: https://sumanthrh.com/post/distributed-and-efficient-finetuning/#zero-powered-data-parallelism
阅读全文
posted @ 2024-06-26 23:39 marsggbo
阅读(54)
评论(0)
推荐(0)
编辑
公告