cangos

  博客园 :: 首页 :: 博问 :: 闪存 :: 新随笔 :: 联系 :: 订阅 订阅 :: 管理 ::

2017年2月22日

摘要: mapreduce中的reduce数量是由什么来进行控制的呢? 1、numReduceTasks 如下是用来进行测试的一段wordcount的代码 将上述代码打包成 parttest.jar,并上传到服务器的opt目录 创建文件/opt/test.txt,并上传到hdfs的/tmp目录下 文本内容如 阅读全文
posted @ 2017-02-22 18:21 cangos 阅读(7641) 评论(0) 推荐(1) 编辑

摘要: 3、流量监控汇总(使用LongWritable实现) 代码: 输出: 4、流量监控汇总(使用自定义的writable类NetflowWritable实现) 输出: 阅读全文
posted @ 2017-02-22 11:43 cangos 阅读(306) 评论(0) 推荐(0) 编辑