摘要: Centos 7 根目录(爆满)100%解决思路,下面以宝塔面板环境为例 1、首先远程到服务器,在~下输入df -h ,看下根目录下文件夹使用情况 [root@localhost~]# df -h Filesystem Size Used Avail Use% Mounted on /dev/vda 阅读全文
posted @ 2020-08-20 17:54 勤奋的园 阅读(3086) 评论(0) 推荐(0) 编辑
摘要: 目前hive启动无法成功,想查看下hive的日志定位问题,但发现hive的安装目录下并没有hive的日志,后来经过在网上谷歌发现: Hive中的日志分为两种 系统日志,记录了hive的运行情况,错误状况。 Job 日志,记录了Hive 中job的执行的历史过程。 系统日志存储在什么地方呢 ? 在hi 阅读全文
posted @ 2020-08-20 17:50 勤奋的园 阅读(2018) 评论(0) 推荐(0) 编辑
摘要: 原文地址:https://my.oschina.net/tearsky/blog/629201 摘要: 1、Operation category READ is not supported in state standby 2、配置spark.deploy.recoveryMode选项为ZOOKEE 阅读全文
posted @ 2020-08-20 17:42 勤奋的园 阅读(492) 评论(0) 推荐(0) 编辑
摘要: 本文基于Spark 2.1.0版本 新手首先要明白几个配置: spark.default.parallelism:(默认的并发数) 如果配置文件spark-default.conf中没有显示的配置,则按照如下规则取值: 本地模式(不会启动executor,由SparkSubmit进程生成指定数量的线 阅读全文
posted @ 2020-08-20 17:38 勤奋的园 阅读(537) 评论(0) 推荐(0) 编辑
摘要: 一. 基本概念 1.NN恢复实际上是由fsimage开始(这个相当于数据的base),如果有多个fsimage,会自动选择最大的fsimage,然后按照editlog序列日志开始执行日志 2.seen_txid文件里的值是当前的最大editlog值。如果nn正在运行,则是edits_inprogre 阅读全文
posted @ 2020-08-20 17:33 勤奋的园 阅读(892) 评论(0) 推荐(0) 编辑