摘要:
序:终于开始接触hadoop了,从wordcount开始1. 采用hadoop streamming模式优点:支持C++ pathon shell 等多种语言,学习成本较低,不需要了解hadoop内部结构调试方便:cat input | ./map | sort | ./reduce > outputhadoop 就是提供了一个分布式平台实现了上述脚本的功能,这是一次mapreduce的过程一个例子: 1 #!/bin/bash 2 source build.env 3 $hadoop_bin fs -rmr $env_root 4 $hadoop_bin fs -mkdir $env. 阅读全文