04 2019 档案

摘要:kudu安装后运行不正常,master中找不到任何tserver,查看tserver日志发现有很多报错: Failed to heartbeat to master:7051: Invalid argument: Failed to ping master at master:7051: Clien 阅读全文
posted @ 2019-04-30 00:21 匠人先生 阅读(1468) 评论(0) 推荐(1) 编辑
摘要:Cloudera Manager中修改配置可能报错: Incorrect string value: '\xE7\xA8\x8B\xE5\xBA\x8F...' for column 'MESSAGE' at row 1 这是一个mysql的字符集问题,极有可能创建scm数据库时使用默认的latin 阅读全文
posted @ 2019-04-30 00:17 匠人先生 阅读(393) 评论(0) 推荐(0) 编辑
摘要:1)将coordinator和executor角色分离 By default, each host in the cluster that runs the impalad daemon can act as the coordinator for an Impala query, execute 阅读全文
posted @ 2019-04-20 18:28 匠人先生 阅读(683) 评论(0) 推荐(0) 编辑
摘要:关于kudu的primary key The primary key may not be changed after the table is created. You must drop and recreate a table to select a new primary key. 创建之后 阅读全文
posted @ 2019-04-13 16:40 匠人先生 阅读(1887) 评论(0) 推荐(0) 编辑
摘要:docker container启动失败,报错:Exited (137) *** ago,比如 Exited (137) 16 seconds ago 这时通过docker logs查不到任何日志,从mesos上看stderr相关的只有一句 I0409 16:56:26.408077 8583 ex 阅读全文
posted @ 2019-04-09 17:18 匠人先生 阅读(25241) 评论(2) 推荐(3) 编辑
摘要:有两种方式来监控logstash: api ui(xpack) When you run Logstash, it automatically captures runtime metrics that you can use to monitor the health and performanc 阅读全文
posted @ 2019-04-08 18:19 匠人先生 阅读(1842) 评论(0) 推荐(0) 编辑
摘要:logstash高可用体现为不丢数据(前提为服务器短时间内不可用后可恢复比如重启服务器或重启进程),具体有两个方面: 进程重启(服务器重启) 事件消息处理失败 在logstash中对应的解决方案为: Persistent Queues Dead Letter Queues 默认都没有开启; 另外可以 阅读全文
posted @ 2019-04-08 17:30 匠人先生 阅读(2780) 评论(0) 推荐(0) 编辑
摘要:一 vi配置文件 ~/.vimrcor/etc/vimrc ps:如果使用的是idea中的vim插件,使用的配置文件为 ~/.ideavimrc~~~`s 配置文件中可以修改配色,可以修改键位绑定,可以修改配置,比如 inoremap <C-a> <Home> inoremap <C-e> <End 阅读全文
posted @ 2019-04-02 17:04 匠人先生 阅读(573) 评论(0) 推荐(0) 编辑
摘要:cloudera manager安装hue后想开启访问mysql(librdbms)需要在这里配置(hue_safety_valve.ini) 添加配置如下 [librdbms] # The RDBMS app can have any number of databases configured 阅读全文
posted @ 2019-04-02 11:31 匠人先生 阅读(1059) 评论(2) 推荐(1) 编辑
摘要:hue中使用hue用户(hue admin)访问hdfs报错: Cannot access: /. Note: you are a Hue admin but not a HDFS superuser, "hdfs" or part of HDFS supergroup, "supergroup". 阅读全文
posted @ 2019-04-02 10:54 匠人先生 阅读(946) 评论(0) 推荐(0) 编辑
摘要:oozie中通过shell执行impala,脚本如下: $ cat test_impala.sh #!/bin/sh /usr/bin/kinit -kt /tmp/impala.keytab impala/server04 /usr/bin/impala-shell -i server04:210 阅读全文
posted @ 2019-04-01 17:46 匠人先生 阅读(1260) 评论(0) 推荐(0) 编辑
摘要:yarn开启日志归集功能,除了配置之外 yarn.log-aggregation-enable=true 还要检查/tmp/logs目录是否存在以及权限,尤其是在开启kerberos之后,有些目录可能不能自动创建成功,需要手工创建: $ hdfs dfs -mkdir /tmp$ hdfs dfs 阅读全文
posted @ 2019-04-01 11:02 匠人先生 阅读(649) 评论(0) 推荐(0) 编辑

点击右上角即可分享
微信分享提示