08 2018 档案

摘要:1. 安装 (1) Nginx下载地址:https://nginx.org/download/nginx-1.14.0.tar.gz (2) 安装时可能出现依赖库不存在,比如prec包,可以使用yum install pcre pcre-devel进行安装。安装的整体命令如下: 2. 启动 (1) 阅读全文
posted @ 2018-08-30 18:46 mengrennwpu 阅读(470) 评论(0) 推荐(0) 编辑
摘要:1. Es-Hadoop异常: org.elasticsearch.hadoop.EsHadoopException: Could not write all entries [615/300864] (maybe ES was overloaded?). Bailing out... at org 阅读全文
posted @ 2018-08-28 22:35 mengrennwpu 阅读(521) 评论(0) 推荐(0) 编辑
摘要:1. 背景 近日在一个Hadoop项目中使用MultipleInputs增加多输入文件时,发现相同路径仅会加载一次,导致后续的统计任务严重失真。本博文旨在记录异常的排查及解决方案。 2. 情景重现 (1) 准备简版的输入文件test,文件内容为"i am ws",输入的HDFS路径为/work/ju 阅读全文
posted @ 2018-08-12 22:05 mengrennwpu 阅读(578) 评论(0) 推荐(0) 编辑