摘要: 当集群出现block missing异常时,一般的排查流程如下: 首先检查是否有datanode处于dead或Decommissioned状态,如果是,尝试恢复datanode,一般block missing会自行消失 如果所有datanode都处于健康状态,则查看是否有datanode的block 阅读全文
posted @ 2019-11-10 19:05 神州优车技术 阅读(815) 评论(0) 推荐(0) 编辑
摘要: 通过spark-sql、hive-sql、hue等提交select或者insert overwrite等sql到hive时,会产生该目录,用于临时存放执行结果,比如insert overwrite会将结果暂存到该目录下,待任务结束,将结果复制到hive表中。关于该目录的生成位置策略可参考该文章:ht 阅读全文
posted @ 2019-11-10 18:49 神州优车技术 阅读(5465) 评论(0) 推荐(0) 编辑