摘要: #p1Vect也是一个向量 p1Vect = math.log(p1Num / p1Denom) p0Vect = math.log(p0Num / p0Denom)报错如下:TypeError: Only length-1 arrays can be ... 阅读全文
posted @ 2018-08-19 11:26 crr121 阅读(1154) 评论(0) 推荐(0) 编辑
摘要: 创建桶表hive> create table house_1(id int,name string,age int) clustered by (id) into 3 buckets row format delimited fields terminated by ... 阅读全文
posted @ 2018-08-19 11:26 crr121 阅读(428) 评论(0) 推荐(0) 编辑
摘要: 创建表(条件之间不能有逗号 fields terminated by ',' 字段之间以逗号分隔)0: jdbc:hive2://localhost:10000/cr> create table if not exists teacher(id int,name s... 阅读全文
posted @ 2018-08-19 11:26 crr121 阅读(1637) 评论(0) 推荐(0) 编辑
摘要: beeline> !connect jdbc:hive2://localhost:10000/crConnecting to jdbc:hive2://localhost:10000/crEnter username for jdbc:hive2://localhos... 阅读全文
posted @ 2018-08-19 11:26 crr121 阅读(8003) 评论(0) 推荐(0) 编辑
摘要: hive的访问:终端访问 远程访问终端访问:安装hive,利用shell脚本访问 不可并发访问远程访问:通过JDBC连接数据仓库 支持并发访问启动hiveserver2服务:查看该命令可知hiveserver2,等价于hive --service hiveserve... 阅读全文
posted @ 2018-08-19 11:26 crr121 阅读(879) 评论(0) 推荐(0) 编辑
摘要: 0: jdbc:hive2://localhost:10000/cr> insert into student values(4,'sunny');WARNING: Hive-on-MR is deprecated in Hive 2 and may not be a... 阅读全文
posted @ 2018-08-19 11:26 crr121 阅读(1950) 评论(0) 推荐(0) 编辑
摘要: Access denied for user xiaoqiu@localhost (using password :NO) resolution:删除匿名用户(mysql.user表中user为空的用户)delete from user where mysql.us... 阅读全文
posted @ 2018-08-19 11:25 crr121 阅读(199) 评论(0) 推荐(0) 编辑
摘要: 当执行下面的命令时出现上述errorMariaDB [(none)]> grant all privileges on hive_meta.* to 'xiaoqiu'@'%';ERROR 1133 (42000): Can't find any matching r... 阅读全文
posted @ 2018-08-19 11:25 crr121 阅读(1677) 评论(0) 推荐(0) 编辑
摘要: [xiaoqiu@s150 /soft/hive/conf]$ schematool -initSchema -dbType mysqlSLF4J: Class path contains multiple SLF4J bindings.SLF4J: Found bi... 阅读全文
posted @ 2018-08-19 11:25 crr121 阅读(511) 评论(0) 推荐(0) 编辑
摘要: 现在有两张表customer和order,需要通过customerid实现customer和order的连接mapperpackage com.cr.JoinMap;import org.apache.hadoop.conf.Configuration;import ... 阅读全文
posted @ 2018-08-19 11:24 crr121 阅读(265) 评论(0) 推荐(0) 编辑
摘要: 错误提示如下:FAILED: Execution Error, return code 2 from org.apache.hadoop.hive.ql.exec.mr.MapRedTaskMapReduce Jobs Launched:Stage-Stage-1:... 阅读全文
posted @ 2018-08-19 11:24 crr121 阅读(652) 评论(0) 推荐(0) 编辑
摘要: java.net.ConnectException: Call From s150/192.168.109.150 to s153:8020 failed on connection exception: java.net.ConnectException: Conn... 阅读全文
posted @ 2018-08-19 11:24 crr121 阅读(546) 评论(0) 推荐(0) 编辑
摘要: 2018-08-06T13:40:10,699 ERROR [41e6cbb7-d859-4b90-8375-c9808c786abc main] metastore.RetryingHMSHandler: Retrying HMSHandler after 2000... 阅读全文
posted @ 2018-08-19 11:24 crr121 阅读(375) 评论(0) 推荐(0) 编辑
摘要: 背景:现在有两张表:customer、order,他们有个共同的cid,需要通过cid实现两张表的连接,并且通过cid进行分组排序思路:首先通过mapper从context里面获取到文件切片,从文件切片中得到路径,从而判断是customer.txt,还是order.t... 阅读全文
posted @ 2018-08-19 11:24 crr121 阅读(168) 评论(0) 推荐(0) 编辑
摘要: 换成root用户就可以了[root@s150 /home/xiaoqiu]# systemctl stop mariadb.service 阅读全文
posted @ 2018-08-19 11:24 crr121 阅读(2100) 评论(0) 推荐(0) 编辑
摘要: 阅读全文
posted @ 2018-08-19 11:23 crr121 阅读(109) 评论(0) 推荐(0) 编辑
摘要: hive初始化元数据的时候出错,该root用户没有权限[xiaoqiu@s150 /soft/hive/conf]$ schematool -initSchema -dbType mysqlSLF4J: Class path contains multiple SLF... 阅读全文
posted @ 2018-08-19 11:23 crr121 阅读(1618) 评论(0) 推荐(0) 编辑
摘要: 启动hive遇到连接的问题:Exception in thread "main" java.lang.RuntimeException: java.net.ConnectException: Call From s150/192.168.109.150 to s150... 阅读全文
posted @ 2018-08-19 11:23 crr121 阅读(1405) 评论(0) 推荐(0) 编辑
摘要: 启动hive出现standbyexception:Exception in thread "main" java.lang.RuntimeException: org.apache.hadoop.ipc.RemoteException(org.apache.hadoo... 阅读全文
posted @ 2018-08-19 11:22 crr121 阅读(2137) 评论(0) 推荐(0) 编辑
摘要: 1、什么是hivehive是基于Hadoop的一种数据库仓库工具,将结构化数据映射为一张数据表,并提供SQL查询,分析等功能2、hive的特点将数据结构(shema)存储在数据库中,数据存储在HDFS中 适用于联机分析处理(OLAP:on-line analytic ... 阅读全文
posted @ 2018-08-19 11:22 crr121 阅读(93) 评论(0) 推荐(0) 编辑