hyunbar

摘要： 1、 问题：拒绝连接 解决方法：hiveserver2 连接异常，重启（hiveserver2连接比较慢要等一会） 我这里两个RunJar是启动了meatestore和hiveserver2 2、 user:duoduo is not allowed impersonate hadoop100 这个 阅读全文

摘要： 1、Sqoop简介 Sqoop将用户编写的sqoop命令翻译为MR程序，MR程序读取关系型数据库中的数据，写入到HDFS或读取HDFS上的数据，写入到关系型数据库 在MR程序中如果要读取关系型数据中的数据，必须制定输入格式为DBInputformat 在MR程序中如果要向关系型数据吸入数据，必须制定 阅读全文

摘要： 1、显示数据库，列名 Apache <property> <name>hive.cli.print.header</name> <value>true</value> </property> <property> <name>hive.cli.print.current.db</name> <val 阅读全文

摘要： 一、为了创建一个新的由Hive管理的HBase表，请使用CREATE TABLE CREATE TABLE hbase_table_1(key int, value string) STORED BY 'org.apache.hadoop.hive.hbase.HBaseStorageHandler 阅读全文

摘要： 1、Kafka工作流程 kafka中消息是以topic进行分类的，生产者生产消息，消费者消费消息，都是面向topic的 topic是逻辑上的概念，而partition是物理上的概念，每个partition对应一个log文件，该log文件中存储的就是producer生产的数据。producer生产的数 阅读全文

摘要： 1、日期函数 1.1 date_add 指定日期n天之后 用法：date_add(date('2018-09-09'),10) 参数类型分别为date和int，返回date类型 select date_add(date('2018-09-09'),10) -- 返回：2018-09-19 1.2 a 阅读全文

摘要： cat hadoop-env.sh export HADOOP_OPTS="$HADOOP_OPTS -Duser.timezone=GMT+08" cat yarn-env.sh YARN_OPTS="$YARN_OPTS -Duser.timezone=GMT+08" cat hbase-env 阅读全文

摘要： Mysql时间加减函数为date_add（）、date_sub（） 定义和用法 DATE_ADD() 函数向日期添加指定的时间间隔。DATE_SUB() 函数向日期减少指定的时间间隔。 语法 DATE_ADD(date,INTERVAL expr type)DATE_SUB(date,INTERVA 阅读全文

摘要： 1、awk数组 1.1 数组结构 1.2 数组分类 索引数组：以数字为下标 关联数组：以字符串为下标 1.3 awk关联数组 现有如下文本，格式如下：即左边是随机字母，右边是随机数字, 即将相同的字母后面的数字加在一起，按字母的顺序输出 以$1为下标，创建数组a[$1]=a[$1]+$2 或者（a[ 阅读全文

摘要： 1、BEGIN模块 BEGIN模块在awk读取文件之前就执行 BEGIN模式常常被用来修改内置变量ORS、RS、FS、OFS等值 2、awk内置变量（预定义变量） 变量名属性 $0 当前记录，一整行 $1,$2,$3....$a 当前记录的第n个区域，区域间由FS分隔。 FS 输入区域分隔符，默认是 阅读全文