Fork me on GitHub

12 2019 档案

在线学习简单构建
摘要：构建一个简单的在线学习pipeline，主要包括样本的生成，模型的训练等。众所周知腾讯开源的一个框架叫angel以及阿里的alink，这两个框架有很多算法模型，可以拿来直接使用。这里面当然也有像FTRL这样的在线更新模型，后期有机会可以利用angel和alink进行相关测试。 大数据处理采用Flin 阅读全文
posted @ 2019-12-16 21:43 石头木 阅读(273) 评论(0) 推荐(0) 编辑
使用horovod构建分布式深度学习框架
摘要：最近一直在尝试着分布式深度学习的架构，主要的原因一方面是几台机子全是1060卡，利用深度网络在较大数据样本上训练的效率极其低下，所以尝试着将几台机子做成分布式，看看能否提高训练效率；第二方面是有人习惯使用tensorflow，有人习惯使用keras，也有人喜欢使用pytorch等，虽然这些框架各自都 阅读全文
posted @ 2019-12-11 22:11 石头木 阅读(2757) 评论(2) 推荐(0) 编辑

点击右上角即可分享
微信分享提示