2015年12月9日
storm安装及启动
摘要： 1、安装一个zookeeper集群2、上传storm的安装包，解压3、修改配置文件storm.yaml#所使用的zookeeper集群主机storm.zookeeper.servers: - "weekend05" - "weekend06" - "weekend07"#nimbus所在的主机名nimbus.host: "weekend05"supervisor.slots... 阅读全文
posted @ 2015-12-09 18:41 暗夜小精灵～～ 阅读(252) 评论(0) 推荐(0) 编辑
HBase API 的使用（一）
摘要： package cn.itcast.bigdata.hbase;import java.util.ArrayList;import org.apache.hadoop.conf.Configuration;import org.apache.hadoop.hbase.HBaseConfiguration;import org.apache.hadoop.hbase.HColumnDescripto... 阅读全文
posted @ 2015-12-09 16:24 暗夜小精灵～～ 阅读(273) 评论(0) 推荐(0) 编辑
HBase API 的使用（二）
摘要： package cn.itcast.bigdata.hbase;import java.util.List;import org.apache.hadoop.conf.Configuration;import org.apache.hadoop.hbase.Cell;import org.apache.hadoop.hbase.HBaseConfiguration;import org.apach... 阅读全文
posted @ 2015-12-09 16:24 暗夜小精灵～～ 阅读(308) 评论(0) 推荐(0) 编辑
hbase集群搭建
摘要： 在hadoop03建立master，。456建立regionservers1.上传hbase安装包2.解压3.配置hbase集群，要修改3个文件（首先zk集群已经安装好了） 注意：要把hadoop的hdfs-site.xml和core-site.xml 放到hbase/conf下 3.1修改hbase-env.sh export JAVA_HOME=/usr/java/jdk1.7.0_55 /... 阅读全文
posted @ 2015-12-09 14:42 暗夜小精灵～～ 阅读(149) 评论(0) 推荐(0) 编辑
hive安装
摘要： 理解：hive：查询，管理，数据库仓库工具版本：0.12，支持hadoop2.x以上将sql语句翻译成mapreduce的语句并管理一些元数据Hive只在一个节点上安装即可1.上传tar包2.解压 tar -zxvf hive-0.9.0.tar.gz -C /cloud/3.配置mysql metastore（切换到root用户） 配置HIVE_HOME环境变量 rpm -qa | grep m... 阅读全文
posted @ 2015-12-09 14:40 暗夜小精灵～～ 阅读(173) 评论(0) 推荐(0) 编辑
hive的常用语法
摘要： hive的常用语法：建表，导入数据包括：内表，外表，分区表，追加数据insert overwrite table tab_ip like..partitioned by 分区，分区是作为一个字段可以直接查询shell方式：hive -S -e 'select * from wk110 t_order';set hive.cli.print.header=true;CREATE TABLE page... 阅读全文
posted @ 2015-12-09 14:40 暗夜小精灵～～ 阅读(310) 评论(0) 推荐(0) 编辑
hbase 的shell用法
摘要： 进入hbase命令行./hbase shell显示hbase中的表list创建user表，包含info、data两个列族create 'user', 'info1', 'data1'create 'user', {NAME => 'info', VERSIONS => '3'}向user表中插入信息，row key为rk0001，列族info中添加name列标示符，值为zhangsanput 'u... 阅读全文
posted @ 2015-12-09 14:40 暗夜小精灵～～ 阅读(228) 评论(0) 推荐(0) 编辑