摘要: 在线安装Mysql 1°、查看mysql的依赖 rpm -qa | grep mysql 2°、删除mysql的依赖 rpm -e --nodeps `rpm -qa | grep mysql` 3°、yum安装mysql yum -y install mysql-server 4°、启动mysql 阅读全文
posted @ 2016-07-11 23:10 扛着锄头进城 阅读(131) 评论(0) 推荐(0) 编辑
摘要: HBase是三维有序存储的,通过rowkey(行键),column key(column family和qualifier)和TimeStamp(时间戳)这个三个维度可以对HBase中的数据进行快速定位。 HBase中rowkey可以唯一标识一行记录,在HBase查询的时候,有两种方式: rowke 阅读全文
posted @ 2016-06-17 17:52 扛着锄头进城 阅读(8379) 评论(2) 推荐(0) 编辑
摘要: 导入数据到hive外部表;1.hive命令创建外部表。create EXTERNAL table applogsnew(applogid string,msgtype string,clienttype string,userid bigint)PARTITIONED BY (create_time 阅读全文
posted @ 2016-06-08 13:56 扛着锄头进城 阅读(4682) 评论(0) 推荐(0) 编辑
摘要: Kafka作为source: 配置文件: #定义各个模块 a1.sources = kafka a1.sinks = log a1.channels = c1 #配置kafka source #source的类型为kafkaSource a1.sources.kafka.type = org.apa 阅读全文
posted @ 2016-06-06 14:02 扛着锄头进城 阅读(1346) 评论(0) 推荐(0) 编辑
摘要: vi exec.sh :set ff=unix(或者:set fileformat=unix) :wq 备注一下。 阅读全文
posted @ 2016-06-06 11:23 扛着锄头进城 阅读(824) 评论(0) 推荐(0) 编辑
摘要: javax.jdo.option.ConnectionURL:&characterEncoding=UTF-8 阅读全文
posted @ 2016-06-02 11:29 扛着锄头进城 阅读(185) 评论(0) 推荐(0) 编辑
摘要: 如果我们表的分区创建非常多的话,对于我们装载数据是一件非常麻烦的事,Hive提供动态分区来解决这个问题。 可以基于查询参数推断出需要创建的分区名称,相比的分区都是静态的,这里就称之为动态的分区。 怎么来弄呢? 首先复制表结构: create table applogs like applogsnew 阅读全文
posted @ 2016-06-02 11:21 扛着锄头进城 阅读(1333) 评论(0) 推荐(0) 编辑
摘要: -XX:PermSize=128m -XX:MaxPermSize=256m -Xms256m -Xmx1024m备注一下。 阅读全文
posted @ 2015-08-06 18:45 扛着锄头进城 阅读(148) 评论(0) 推荐(0) 编辑
摘要: 因为需要配置固定IP,在网上找了很久终于找到一个可行的例子,自己配置成功了。1.首先获取你的GATEWAY 方便后面在cento系统配置里使用选取菜单栏:Edit->Virtual Network Editor 选择VMnet8,点击NAT Settings查看一下GATEWAY地址:此处的Gate... 阅读全文
posted @ 2015-04-25 23:43 扛着锄头进城 阅读(161) 评论(0) 推荐(0) 编辑
摘要: 登陆连接centos系统,输入ifconfig可以查看到当前本机的IP地址信息,是没有ip地址的。要让IP地址永久生效,需要编辑网卡配置文件1.使用VI编辑器设置,如vi/etc/sysconfig/network-scripts/ifcfg-eth02说明一下这个文件;DEVICE=eth0网卡对... 阅读全文
posted @ 2015-04-17 18:18 扛着锄头进城 阅读(281) 评论(0) 推荐(0) 编辑