03 2018 档案

[db] hadoop分布式生成tfrecord格式文件
摘要：利用hadoop分布式生成tfrecord格式文件 由于到处理的数据量较大，亿为单位的数据条数，所以提前利用hadoop的分布式的优势处理成tfrecord格式供tf训练。 hadoop streaming执行的是mapper reduce流处理。 完整脚本文件放在了 "github" 上， inp 阅读全文
posted @ 2018-03-14 10:52 战侠歌1994 阅读(1468) 评论(0) 推荐(0) 编辑