2020 年 7月 25 日随笔档案 - 未来相濡以沫

2020年7月25日

摘要：一、单选题 1、Shuffle中Partitioner 分区发生在哪个过程( A ) A. 溢写过程 B. 本地Merge C. reduce函数阶段 D. map函数阶段 2、在整个maprduce运行阶段，数据是以( A )形式存在的 A. key/value B. LongWritable C 阅读全文

posted @ 2020-07-25 16:57 未来相濡以沫阅读(947) 评论(0) 推荐(0) 编辑

hadoop用到的shell脚本

摘要： 1、查询当前hadoop集群中各服务器已经开启的全部服务 #!/bin/bash #查询集群各台服务器已经开启的服务 for ((i=3;i<6;i++)) do echo " Hadoop0$i " ssh Hadoop0$i "source /etc/profile && jps" done 加阅读全文

posted @ 2020-07-25 15:56 未来相濡以沫阅读(280) 评论(0) 推荐(0) 编辑