2018年6月5日
[Hive]编译部署-hive-1.1.0-cdh5.7.0
摘要： 2.部署 解压 # tar -xzvf ~/software/hive-1.1.0-cdh5.7.0.tar.gz -C ~/app/ 配置环境变量 export HIVE_HOME=/home/hadoop/app/hive-1.1.0-cdh5.7.0 export PATH=$HIVE_HOM 阅读全文
posted @ 2018-06-05 20:59 NightPxy 阅读(783) 评论(0) 推荐(0) 编辑
[Hadoop]-MapReduce-使用篇
摘要： 1.Mapper 1.1 泛型参数 Mapper有四个泛型参数,Mapper<KEYIN, VALUEIN, KEYOUT, VALUEOUT>: KEYIN:默认读取的一行文本的起始偏移量.Long类型,在Hadoop中包装成LongWriteable VALUEIN:默认读取的一行文本的字符串信 阅读全文
posted @ 2018-06-05 16:44 NightPxy 阅读(188) 评论(0) 推荐(0) 编辑
[Hadoop]MapReduce-架构篇
摘要： 1.MapReduce概述 MapReduce是Hadoop的计算引擎,是Hadoop的三大组件之一. 但随着技术的发展,MapReduce臃肿繁杂,正在被其它的计算引擎所慢慢取代,这里就了解一下MapReduce的执行过程就行了 2.MapReduce的执行过程 MapReduce总体上分为4个执 阅读全文
posted @ 2018-06-05 13:36 NightPxy 阅读(163) 评论(0) 推荐(0) 编辑