摘要: 今天运气很好,两次遇到了这个兼容性问题,spring3.x不支持 java 1.8 byte code format!! 降低JDK到JDK1.7即可!! 阅读全文
posted @ 2017-09-10 07:33 回眸,境界 阅读(864) 评论(0) 推荐(0) 编辑
摘要: 1 ** 2 * Spring测试activiti配置是否正常 3 * Title: SpringActivitiTest 4 * Description: 5 * School: qiqihar university 6 * @author BQ 7 * @date 2017年9月9日上午9:40:57 8 * @version 1.0 9 *... 阅读全文
posted @ 2017-09-09 09:59 回眸,境界 阅读(1144) 评论(0) 推荐(0) 编辑
摘要: 在开发中,一个良好的编程习惯对这个团队也是一种带动作用,今天在网上看到了一坨这样的代码和屎,他恶心了!再次强调 一定要注意代码的缩进和格式化!!切记!切记!! 一定 不可以写出来和他一样的代码!!!!!! 阅读全文
posted @ 2017-08-22 20:48 回眸,境界 阅读(272) 评论(0) 推荐(0) 编辑
摘要: SparkStreaming和KafKa结合报错!报错之前代码如下: 注意: 在14行 应该是 wordCounts.print() 报错原因 : 在使用Streaming 的时候需要触发如下方法 print否则出现如下的错误 修改后的代码如下: 但是在stackoverflow上看到 报这样的错误 阅读全文
posted @ 2017-07-28 17:19 回眸,境界 阅读(4544) 评论(0) 推荐(0) 编辑
摘要: 其他的配置hive基本配置就不记录了!! 1. 拷贝$HIVE_HOME/conf/hive-site.xml $SPARK_HOME/conf/2. 在$SPARK_HOME/conf/目录中,修改spark-env.sh,添加 export HIVE_HOME=/usr/local/apache 阅读全文
posted @ 2017-07-27 11:44 回眸,境界 阅读(2317) 评论(0) 推荐(0) 编辑
摘要: 1.下载源码 首先,从github上下载protobuf的源码,地址:https://github.com/google/protobuf,我选择下载2.5.0版本。 2.编译protobuf 将下载的压缩包解压缩 根目录下没有configure文件,却有一个autogen.sh,原来是因为prot 阅读全文
posted @ 2017-07-24 16:02 回眸,境界 阅读(9615) 评论(0) 推荐(1) 编辑
摘要: QQ空间说说抓取难度比较大,花了一个星期才研究清楚! 代码请移步到GitHub GitHub地址:https://github.com/20100507/Qzone 【没有加入多线程,希望你可以参与进来加入多线程不过 单个QQ请求频率不可以太高 过多的线程就需要 更多的QQ小号轮流登录】 不要忘了点 阅读全文
posted @ 2017-07-19 17:24 回眸,境界 阅读(4760) 评论(24) 推荐(5) 编辑
摘要: yarn 的执行流程 Spark wordCount 执行流程 mr 的shuffle 过程 阅读全文
posted @ 2017-07-19 15:19 回眸,境界 阅读(689) 评论(0) 推荐(0) 编辑
摘要: 这几天在写索引,想到一些有意思的TIPS,希望大家有收获。 一、一些常见的SQL实践 (1)负向条件查询不能使用索引 select * from order where status!=0 and stauts!=1 select * from order where status!=0 and s 阅读全文
posted @ 2017-07-19 15:04 回眸,境界 阅读(286) 评论(0) 推荐(0) 编辑
摘要: 图不是使用Visio画的 画的不是特别好【仅仅记录一下 学习过程】 阅读全文
posted @ 2017-07-18 16:18 回眸,境界 阅读(573) 评论(0) 推荐(0) 编辑