01 2017 档案
摘要:在Hive脚本中如果有 use db; #即使用数据库 最后一定要有一个exit;脚本,退出hive窗口 否则运行到最后,hive无法启动MR任务,只是卡在打印完成hive脚本处。 例子如下: exit为必备的退出语句。
阅读全文
摘要:Elasticsearch5.0 安装问题集锦 elasticsearch 5.0 安装过程中遇到了一些问题,通过查找资料几乎都解决掉了,这里简单记录一下 ,供以后查阅参考,也希望可以帮助遇到同样问题的你。 问题一:警告提示 [2016-11-06T16:27:21,712][WARN ][o.e.
阅读全文
摘要:使用管道生成的while,是无法进行并发管理的 hdfs dfs -rmr $cdns_hadoop_base_dir/dt=$ydate hdfs dfs -mkdir $cdns_hadoop_base_dir/dt=$ydate cat nodeList| while read nodenam
阅读全文
摘要:【转自】https://my.oschina.net/itblog/blog/547250 摘要: 前段时间研究的Log4j+Kafka中,有人建议把Kafka收集到的日志存放于ES(ElasticSearch,一款基于Apache Lucene的开源分布式搜索引擎)中便于查找和分析,在研究此方案可
阅读全文