摘要:
在主机上添加映射步骤 1、打开C盘 注意:用nopedata++打开 保存即可! 阅读全文
摘要:
安装: 检测是否已经安装了mysql rpm -qa | grep mysql 如果已经安装了,将其卸载,如: rpm -e --nodeps mysql-libs-5.1.71-1.el6.x86_64 安装mysql 1、mkdir /usr/local/src/mysql 2、cd /usr/ 阅读全文
摘要:
当我们在hdfs上操作文件的时候,有时候会报错 ,出现namenode in safemode namenode处于安全模式的原因: 1、NameNode发现集群中DataNode丢失达到一定比例(0.01%)时会进入安全模式,此时只允许查看数据不允许对数据进行任何操作。 2、HDFS集群即使启动正 阅读全文
摘要:
当我们启动Hadoop集群的时候,发现有一台机器的nodemanager启动后自动关闭, 查看日志的时候发现有错误:yarn-root-nodemanager-log 解决办法: netstat anp |grep 端口号 如果有进程占用这个端口,kill -9 这个进程 重新启动即可 阅读全文
摘要:
编写一个xsync文件 然后放在/usr/local/bin 目录下面 xsync文件如下: 阅读全文
摘要:
一、简介 hue是一个开源的apache hadoop ui系统,由cloudear desktop演化而来,最后cloudera公司将其贡献给了apache基金会的hadoop社区,它基于python框架django实现的。 通过使用hue,我们可以使用可视化的界面在web浏览器上与hadoop集 阅读全文
摘要:
hadoop集群之Datenode无法启动解决办法 我们在启动hadoop集群的时候,通过jps查看进程,发现namenode RM和Secondary NameNode都有,但datanode没有启动,然后 datanode的启动日志如下 原因: 是多次format Namenode导致的Name 阅读全文
运行SparkStreaming程序时出现 Exception in thread "main" java.lang.NoSuchMethodError: scala.Predef$.ArrowA异常
摘要:
Exception in thread "main" java.lang.NoSuchMethodError: scala.Predef$.ArrowA 这个问题是版本不统一导致的。 之前是2.11,编译出问题,所以需要调整到2.10 阅读全文
摘要:
查看日志发现一下的错误: 2018-10-08 15:29:26,373 FATAL org.apache.hadoop.hdfs.server.namenode.FSEditLog: Error: recoverUnfinalizedSegments failed for required jou 阅读全文
摘要:
虚拟机开机黑屏无法进入登录linux,提示the configuration defaults for gnome power manager have not been installed correctly 可能是磁盘满造成的 使用命令 find / -size +200M -exec du - 阅读全文