06 2017 档案

摘要:本身我是这么运行的: 15 1 * * * /data/xx/shells/run.sh >> /data/xx/log/joblog/job.log 发现job.log中,没有打出hive的mapreduce日志来 最后解决办法是: 后边添加2>&1 ,意思是将标准错误输出重定向到标准输出,但是好 阅读全文
posted @ 2017-06-30 09:38 HarkLee 阅读(548) 评论(0) 推荐(0) 编辑
摘要:select * from tbl where id=2 union select * from tbl where id =1 如果hive使用union这么查询的时候,我们会发现数据变乱了。 解决办法就是在select后边实际写上列名,就没有问题了,例如: select column1,colu 阅读全文
posted @ 2017-06-29 20:31 HarkLee 阅读(1125) 评论(0) 推荐(0) 编辑
摘要:sudo -E -u hadoop /home/hadoop/bin/hdfs haadmin -getServiceState nn1 sudo -E -u hadoop /home/hadoop/bin/hdfs haadmin -getServiceState nn2 sudo -E 加大E是 阅读全文
posted @ 2017-06-27 13:39 HarkLee 阅读(363) 评论(0) 推荐(0) 编辑
摘要:转自:http://blog.csdn.net/wzy0623/article/details/73650053 一、为什么要用到Flume 在以前搭建HAWQ数据仓库实验环境时,我使用Sqoop抽取从MySQL数据库增量抽取数据到HDFS,然后用HAWQ的外部表进行访问。这种方式只需要很少量的配置 阅读全文
posted @ 2017-06-27 08:38 HarkLee 阅读(15455) 评论(0) 推荐(0) 编辑
摘要:<property> <name>hive.exec.compress.intermediate</name> <value>true</value></property><property> <name>mapreduce.map.output.compress</name> <value>tru 阅读全文
posted @ 2017-06-26 15:46 HarkLee 阅读(580) 评论(0) 推荐(0) 编辑
摘要:在hive-site.xml编辑 <property> <name>hive.exec.dynamic.partition</name> <value>true</value></property><property> <name>hive.exec.dynamic.partition.mode</ 阅读全文
posted @ 2017-06-26 15:35 HarkLee 阅读(180) 评论(0) 推荐(0) 编辑
摘要:有时候发现自己将中文编码后还是会存在乱码的情况,解决办法就是在Server.xml中的Connector结点,配置 URIEncoding="UTF-8"即可 阅读全文
posted @ 2017-06-10 08:56 HarkLee 阅读(293) 评论(0) 推荐(0) 编辑
摘要:通过这里的回答,我们可以知道: Tomcat在 7.0.73, 8.0.39, 8.5.7 版本后,添加了对于http头的验证。 具体来说,就是添加了些规则去限制HTTP头的规范性 参考这里 具体来说: org.apache.tomcat.util.http.parser.HttpParser#IS 阅读全文
posted @ 2017-06-10 08:18 HarkLee 阅读(83482) 评论(2) 推荐(0) 编辑
摘要:配置教程: 转自:http://www.centoscn.com/mysql/2015/0107/4437.html centos安装mysql-proxy 所以在安装之前先 libevent我采用源代码安装, 下载的 libevent-1.4.13-stable.tar.gz 现在就可以安装mys 阅读全文
posted @ 2017-06-08 19:11 HarkLee 阅读(2372) 评论(1) 推荐(0) 编辑
摘要:https://my.oschina.net/itblog/blog/547250 http://www.cnblogs.com/yjmyzz/p/ELK-install-tutorial.html 注意: 目前我使用的版本是 1、 elastic需要给目录给非root权限和组:chown -R l 阅读全文
posted @ 2017-06-07 09:29 HarkLee 阅读(166) 评论(0) 推荐(0) 编辑
摘要:转自:http://blog.csdn.net/zhouhong1026/article/details/38396311 转自:http://hi.baidu.com/qianjian21/blog/item/2fecbd2f687ba03e1e308969.html 每新建一个类上面都会有一行注 阅读全文
posted @ 2017-06-01 15:37 HarkLee 阅读(323) 评论(0) 推荐(0) 编辑

点击右上角即可分享
微信分享提示