会员
周边
众包
新闻
博问
闪存
赞助商
所有博客
当前博客
我的博客
我的园子
账号设置
简洁模式
...
退出登录
注册
登录
大鱼吃小鱼,小鱼吃虾米
博客园
首页
新随笔
联系
订阅
管理
2022年6月11日
加速训练之并行化 tf.data.Dataset 生成器
摘要: 在处理大规模数据时,数据无法全部载入内存,我们通常用两个选项 使用tfrecords 使用 tf.data.Dataset.from_generator() tfrecords的并行化使用前文已经有过介绍,这里不再赘述。如果我们不想生成tfrecord中间文件,那么生成器就是你所需要的。 本文主要记
阅读全文
posted @ 2022-06-11 12:20 鱼与鱼
阅读(683)
评论(0)
推荐(1)
编辑
公告