2016年10月14日

spark-2.0.0与hive-1.2.1整合

摘要： SparkSQL与Hive的整合 1. 拷贝$HIVE_HOME/conf/hive-site.xml和hive-log4j.properties到 $SPARK_HOME/conf/ 2. 在$SPARK_HOME/conf/目录中，修改spark-env.sh，添加 export HIVE_HO 阅读全文

posted @ 2016-10-14 15:25 潇洒的麦兜 阅读(5307) 评论(0) 推荐(0) 编辑

kafka_2.11-0.10.0.0安装步骤

摘要： Kafka安装配置 我们使用5台机器搭建Kafka集群： 1. cluster-1-namenode-1-001 172.16.0.147 2. cluster-1-datanode-1-001 172.16.0.144 3. cluster-1-datanode-1-003 172.16.0.14 阅读全文

posted @ 2016-10-14 15:19 潇洒的麦兜 阅读(2525) 评论(0) 推荐(0) 编辑

hive-1.2.1安装步骤

摘要： 一.Hive安装和配置 1.先决条件 已经安装好hadoop-2.4.1,hbase-1.0.0。 2.下载Hive安装包 当前Hive可到apache官网下载，选择的是hive-1.2.1。运行： wget http://www-us.apache.org/dist/hive/hive-1.2.1 阅读全文

posted @ 2016-10-14 15:10 潇洒的麦兜 阅读(6158) 评论(0) 推荐(0) 编辑

导航