2018年6月4日
mapreduce压缩
摘要： 这是mr的一种优化策略，通过压缩编码对mapper或者reducer的输出进行压缩，以减少磁盘io，提高mr运行速度（但也相应增加了cpu运算负担） 特性： 1.mr支持将map输出的结果或者reduce输出的结果进行压缩，以减少网络IO或最终输出数据的体积。 2.压缩特性使用得当能提高性能，但运用 阅读全文
posted @ 2018-06-04 08:10 瓶子xf 阅读(108) 评论(0) 推荐(0) 编辑