2018年6月10日
MapReduce_partition
摘要： vim partititon aa 1 2bb 2 22cc 11dd 1ee 99 99 999ff 12 23 123 [hadoop@h201 ~]$ hadoop fs -cat /user/hadoop/output/part-r-0000118/06/10 17:55:02 WARN u 阅读全文
posted @ 2018-06-10 18:00 蜘蛛侠0 阅读(140) 评论(0) 推荐(0) 编辑
MapReduce_TopK
摘要： vim topk.txt a 1000b 2000c 90000d 88e 999999f 9998g 13223 /usr/jdk1.7.0_25/bin/javac TopK.java /usr/jdk1.7.0_25/bin/jar cvf tk.jar TopK*class [hadoop@ 阅读全文
posted @ 2018-06-10 16:26 蜘蛛侠0 阅读(188) 评论(0) 推荐(0) 编辑
MapReduce_MaxValue
摘要： *************setup()，此方法被MapReduce框架仅且执行一次，在执行Map任务前，进行相关变量或者资源的集中初始化工作。若是将资源初始化工作放在方法map()中，导致Mapper任务在解析每一行输入时都会进行资源初始化工作，导致重复，程序运行效率不高！cleanup(),此方 阅读全文
posted @ 2018-06-10 15:26 蜘蛛侠0 阅读(163) 评论(0) 推荐(0) 编辑
Hbase用java基础操作
摘要： HbaseCreate--建表 HbaseInsert--插入 HbaseCI-建表加插入 HbaseScan--查看整个表 HbaseZH--hbase综合使用常用API hbase执行过程不执行MapReduce,直接java编译就可以 /usr/local/jdk1.7.0_25/bin/ja 阅读全文
posted @ 2018-06-10 15:04 蜘蛛侠0 阅读(410) 评论(0) 推荐(0) 编辑