2019年6月13日
Mapreduce执行过程
摘要： Mapreduce执行过程 splitSize=Mash.max(minSize,Math.min(maxSize,blockSize)) 数据块大小一般与分片大小相同 Block数据块 分片 FileSplit FilrInputFormat 继承，重写可以设置字节的K.V 分片 K.V(一条数据 阅读全文
posted @ 2019-06-13 20:40 虎呗 阅读(152) 评论(0) 推荐(0) 编辑
hadoop-hdfs-伪分布式环境搭建-使用
摘要： 配置 hadoop-env.sh (hadoop环境) etc/hadoop/core-site.xml: <property> <name>fs.defauletFS</name>规划namenode在哪启动 <value>hdfs://node01:9000</value> </property 阅读全文
posted @ 2019-06-13 08:41 虎呗 阅读(260) 评论(0) 推荐(0) 编辑