一只猪儿虫 - 博客园

2018年12月30日

java.lang.IllegalArgumentException: Mapped Statements collection does not contain value for com.bjsxt.mapper.PeopleMapper

摘要：报错信息： Type Exception Report Description The server encountered an unexpected condition that prevented it from fulfilling the request. Exception Root C 阅读全文

posted @ 2018-12-30 12:41 一只猪儿虫阅读(5074) 评论(0) 推荐(0) 编辑

2018年11月27日

storm_分组策略

摘要：注意1：原始的案例 spout 和bolt都是1个并发所以文件中30条日志从spout发出以后 bolt接受到30条注意2：spout 给成2 和bolt是1 所以文件中30条日志从2个spout发出以后 bolt接受到60条注意3：spout 给成1和bolt是2 所以文件中30条日志阅读全文

posted @ 2018-11-27 11:35 一只猪儿虫阅读(147) 评论(0) 推荐(0) 编辑

storm_常用命令

摘要： 1）nimbus：启动nimbus守护进程 storm nimbus 2）supervisor：启动supervisor守护进程 storm supervisor 3）ui：启动UI守护进程。 storm ui 4）list：列出正在运行的拓扑及其状态 storm list 5）logviewer：阅读全文

posted @ 2018-11-27 11:34 一只猪儿虫阅读(172) 评论(0) 推荐(0) 编辑

Storm集群搭建

摘要： 1 准备： 3台虚拟机 + Jdk8 +zookeeper集群 2 Storm集群部署 1）下载/opt/software目录下官方网址：http://storm.apache.org/ 2）解压jar包到 ~/module目录下 tar -zxf apache-storm-1.1.0.tar. 阅读全文

posted @ 2018-11-27 11:33 一只猪儿虫阅读(315) 评论(0) 推荐(0) 编辑

Elasticsearch 安装

摘要： 1，Elasticsearch 安装：官网下载 https://www.elastic.co/downloads/past-releases/elasticsearch-5-2-2 安装包解压 Elasticsearch安装包 tar -zxvf elasticsearch-5.6.2.tar. 阅读全文

posted @ 2018-11-27 11:32 一只猪儿虫阅读(197) 评论(0) 推荐(0) 编辑

单例模式（饿汉式+懒汉式）

摘要：第一种：饿汉式：第二种：懒汉式：单例的延迟加载模式第三种：阅读全文

posted @ 2018-11-27 11:29 一只猪儿虫阅读(136) 评论(0) 推荐(0) 编辑

2018年11月12日

本机spark 消费kafka失败（无法连接）

摘要：本机spark 消费kafka失败（无法连接）终端也不报错就特么不消费：但是用console的consumer 却可以经过各种改版本，测试配置，最后发现只要注释掉 kafka 配置server.properties 中的host.name=kevinhost1(我自己的主机名) 就行了阅读全文

posted @ 2018-11-12 18:03 一只猪儿虫阅读(759) 评论(0) 推荐(0) 编辑

2018年10月30日

ERROR tool.ImportTool: Encountered IOException running import job: java.io.IOException: Hive exited with status 2

摘要：这是sqoop的迁移数据到hive的报错解决方案： 1，已经尝试不是晚上大多数说的 libthrity的原因 2，查看自己的配置 sqoop-env.sh 如果配置的路径写的不对，对应的包就无法找到了也会报错删除之前hdfs缓存的目录，然后重新执行下面语句阅读全文

posted @ 2018-10-30 08:29 一只猪儿虫阅读(7191) 评论(0) 推荐(0) 编辑

2018年10月29日

ERROR tool.ImportTool: Encountered IOException running import job: java.io.IOException: Cannot run program "hive": error=2, No such file or directory

摘要：原因是hive没有设置环境变量 1，vim /etc/profile （切换root用户） 2.source /etc/profile 阅读全文

posted @ 2018-10-29 16:06 一只猪儿虫阅读(2041) 评论(0) 推荐(0) 编辑

2018年10月8日

sparkshell运行sql报错： java.lang.ClassNotFoundException: com.mysql.jdbc.Driver

摘要：下载msyql的连接driver https://download.csdn.net/download/xz360717118/10662304 把其中一个： mysql-connector-java-5.1.27-bin.jar 放到了spark安装目录下的jars文件夹下面并且分发给所有的机器阅读全文

posted @ 2018-10-08 14:28 一只猪儿虫阅读(3648) 评论(0) 推荐(3) 编辑