CentOS离线状态下安装Python3.7.0
摘要：1.下载python安装包以及依赖的包 python安装包：Python-3.7.0 下载地址：www.python.org/ftp/python/3.7.0/Python-3.7.0.tar.xz 依赖安装包 zlib-devel krb5-devel ibselinux-devel bzip2-
阅读全文
posted @
2019-05-30 10:45
吹静静
阅读(10819)
推荐(1) 编辑
SQL练习题
摘要：Student(S#,Sname,Sage,Ssex) --学生表 Course(C#,Cname,T#) --课程表 SC(S#,C#,score) --成绩表 Teacher(T#,Tname) --教师表 -- 1、查询“001”课程比“002”课程成绩高的所有学生的学号; select a.S# -- 是表限定符,...
阅读全文
posted @
2019-05-30 08:07
吹静静
阅读(154)
推荐(0) 编辑
报错：ModuleNotFoundError: No module named '_ctypes'
摘要：报错背景： CentOS 7 Python3.7 安装 setuptools 插件的时候报错。 报错现象： 报错原因： 不明 报错解决： 下载 libffi-devel-3.0.13-18.el7.x86_64.rpm 并安装 下载地址：https://centos.pkgs.org/7/cento
阅读全文
posted @
2019-05-29 10:44
吹静静
阅读(1984)
推荐(0) 编辑
报错：WARN [WorkerSender[myid=1]:QuorumCnxManager@584] - Cannot open channel to 2 at election address /x.x.x.x:3888
摘要：报错背景： zookeeper安装完成之后，启动之后正常，但是查看log文件zookeeper.log时发现报错。 报错现象： 报错原因： 如果是刚启动zookeeper报出这个错误，然后不再不错，那就是正常现象。是由于有的节点启动，而有的节点还没有启动，这段时间已经启动的节点就会去努力寻找没有启动
阅读全文
posted @
2019-05-27 09:21
吹静静
阅读(2392)
推荐(0) 编辑
报错:（未解决）NoReplicaOnlineException: No replica in ISR for partition __consumer_offsets-8 is alive. Live brokers are: [Set(50, 51, 52)], ISR brokers are: [68]
摘要：报错背景： CDH集成kafka插件之后，启动kafka时就报出此错误。 报错现象： 报错原因： 主要信息：No replica in ISR for partition __consumer_offsets-8 is alive 信息翻译：ISR中没有用于分区__consumer_offsets-
阅读全文
posted @
2019-05-21 15:01
吹静静
阅读(1801)
推荐(0) 编辑
报错:（未解决）Opening socket connection to server master/192.168.52.26:2181. Will not attempt to authenticate using SASL (unknown error)
摘要：报错背景： CDH集群中，将kafka和Flume整合，将kafka的数据发送给Flume消费。 启动kafka的时候正常，但是启动Flume的时候出现了报错现象。 报错现象： 报错原因： 这个报错并不是Flume的原因，而是kafka的锅。kafka由于某些原因报错，导致Flume连接kafka的
阅读全文
posted @
2019-05-21 14:50
吹静静
阅读(4207)
推荐(0) 编辑
报错：Unable to read additional data from client sessionid 0x36ab52d38c20b20, likely client has closed socket
摘要：报错背景： CDH集群中，将kafka和Flume整合，将kafka的数据发送给Flume消费。 启动kafka的时候正常，但是启动Flume的时候出现了报错现象。 但是我检查了Flume，Flume的状态很正常，于是我又查看了zookeeper的日志（/var/log/zookeeper/），发现
阅读全文
posted @
2019-05-21 11:24
吹静静
阅读(12150)
推荐(0) 编辑
报错：(未解决)java.lang.VerifyError: Instruction type does not match stack map
摘要：报错背景： CDH中集成kafka的服务，解决完kafka的jar包报错之后重启，发现这个报错。 报错现象： 报错原因： 报错原因不明，看不懂，没查到相关资料。 报错解决： 不知道怎么解决的，在无数次的重启之后，过了段时间报错自己消失了。
阅读全文
posted @
2019-05-21 11:01
吹静静
阅读(1779)
推荐(0) 编辑
报错：java.lang.AbstractMethodError: nl.techop.kafka.KafkaHttpMetricsReporter.logger()Lcom/typesafe/scalalogging/Logger;
摘要：报错背景： CDH启动kafka的时候出现报错情况，并且报错的节点挂掉。 报错现象： 报错原因： jar包冲突，仔细检查环境里面是不是有自己打的jar包里面正好有kafka的相关内容，并且放在了环境变量吧可以读取的目录。 报错解决： 删除冲突的jar包，或者更改环境变量，重启之后报错消失。
阅读全文
posted @
2019-05-21 10:46
吹静静
阅读(869)
推荐(0) 编辑
报错：Error while fetching metadata with correlation id 67 : {alarmHis=LEADER_NOT_AVAILABLE}
摘要：报错背景： 单机安装了kafka，创建完成主题，启动生产者的时候产生报错现象。报错时持续不断打印日志信息。 报错现象： 报错原因： 获取相关ID为xx的元数据时出错。 报错解决： 1.进入到kafka的安装目录下的配置文件目录 cd /opt/kafka/config 2.打开server.prop
阅读全文
posted @
2019-05-21 10:36
吹静静
阅读(9348)
推荐(0) 编辑
报错：Exception: org.apache.sqoop.common.SqoopException Message: DRIVER_0002:Given job is already running - Job with id 1
摘要：报错背景： 创建完成job之后，执行job的时候报错。 报错现象： 报错原因： 日志中的提示信息说明，此时已经有一个job正在运行，所以报错。 报错解决： 查看这个job的状态：sqoop:000> status job --jid 1 结束这个job的进程：sqoop:000> stop job
阅读全文
posted @
2019-05-13 15:09
吹静静
阅读(408)
推荐(0) 编辑
报错：org.apache.sqoop.common.SqoopException Message: CLIENT_0001:Server has returned exception NoClassDefFoundError: org/codehaus/jackson/map/JsonMappingException
摘要：报错背景： CDH集成sqoop2服务之后，创建好link和job之后，执行job的时候报错。 报错现象： 报错原因： (1) 查看详细报错情况 sqoop:000> set option --name verbose --value true (2) 发现报错日志里面有这么一句话 java.lan
阅读全文
posted @
2019-05-13 11:32
吹静静
阅读(630)
推荐(0) 编辑
报错：MetaException(message:Version information not found in metastore. )
摘要：报错背景： CDH安装完成hive后启动失败。 报错现象： 报错原因： 报错解决： 修改 conf/hive-site.xml 中的 “hive.metastore.schema.verification” 改为 false
阅读全文
posted @
2019-05-08 15:25
吹静静
阅读(4849)
推荐(0) 编辑
报错：The specified datastore driver ("com.mysql.jdbc.Driver") was not found in the CLASSPATH. Please check your CLASSPATH specification, and the name of the driver.
摘要：报错背景： CDH中集成hive插件，启动报错。 报错现象： 报错原因： driver ("com.mysql.jdbc.Driver") was not found in the CLASSPATH 驱动出问题，找不到mysql驱动。 报错解决： 将jdbc驱动复制到/opt/cloudera/p
阅读全文
posted @
2019-05-08 15:07
吹静静
阅读(2211)
推荐(0) 编辑
报错：Error starting Jetty. JSON Metrics may not be available.java.net.BindException:地址已在使用
摘要：报错背景： 刚在CDH中集成Flume插件，启动报错 报错现象： 报错原因： 我也没看懂具体原因，但是在解决的时候稀里糊涂就把报错解决了。 报错解决： 进入flume的配置目录：/etc/flume-ng/conf/ 编辑文件：flume.conf 按照自己的需求填写相关语句 完成之后报错消失（CD
阅读全文
posted @
2019-05-07 15:51
吹静静
阅读(854)
推荐(0) 编辑
报错：java.lang.ClassNotFoundException: org.codehaus.jackson.map.JsonMappingException
摘要：报错背景： 执行hdfs-mysql的job任务的时候报错。 报错现象： 报错原因： java.lang.ClassNotFoundException: org.codehaus.jackson.map.JsonMappingException 找不到这个类 报错解决： 将jackson-core-
阅读全文
posted @
2019-05-07 09:18
吹静静
阅读(2448)
推荐(0) 编辑
Sqoop2 将hdfs中的数据导出到MySQL
摘要：1.进入sqoop2终端： [root@master /]# sqoop2 2.为客户端配置服务器： sqoop:000> set server --host master --port 12000 --webapp sqoop 3.查看服务器配置： sqoop:000> show version
阅读全文
posted @
2019-05-06 18:22
吹静静
阅读(3589)
推荐(0) 编辑
报错：Sqoop2 Error message: Class not found JDBC Driver Class: com.mysql.jdbc.Driver
摘要：报错背景： CDH安装完成Sqoop2的组建后进行创建link的操作。 报错现象： 报错原因： 报错解释：未找到JDBC驱动程序类 1.”com.mysql.jdbc.Driver“这几个字母拼写错误； 2.未将jdbc驱动放入指定目录：/var/lib/sqoop2 我的错误是第二种。 报错解决：
阅读全文
posted @
2019-05-06 17:38
吹静静
阅读(785)
推荐(0) 编辑
报错：Error, CM server guid updated, expected xxxxx, received xxxxx (未解决)
摘要：报错背景： CDH断电重启后，cloudera-scm-server启动报错， cloudera-scm-server 已死，但 pid 文件仍存 由于没有成熟的解决方案，于是我就重新安装了MySQL数据库， 并且重新赋予了各种权限。 这个时候cloudera-scm-server可以启动成功，cl
阅读全文
posted @
2019-05-06 10:27
吹静静
阅读(3323)
推荐(0) 编辑
报错：Configured broker.id 68 doesn't match stored broker.id 113 in meta.properties
摘要：报错背景： CDH中安装完成kafka的组件后不能成功启动，发现UI界面中的broker.id和服务器中的broker.id不一致， 因此更改了服务器中broker.id 但是更改完成之后还是报错。 报错现象： Fatal error during KafkaServer startup. Prep
阅读全文
posted @
2019-05-06 10:21
吹静静
阅读(815)
推荐(0) 编辑
管理
