tele - 博客园

2018年8月18日

摘要：打开$HADOOP_HOME/etc/hadoop/yarn-site.xml,增加以下配置(在此配置文件中尽量不要使用中文注释) 依次执行以下命令start-dfs.sh,start-yarn.sh.mr-jobhistory-daemon.sh start historyserver启动完毕后j 阅读全文

posted @ 2018-08-18 21:42 tele 阅读(1417) 评论(0) 推荐(0) 编辑

hadoop 3.x 配置历史服务器

摘要：修改$HADOOP_HOME/etc/hadoop/mapred-site.xml,加入以下配置(修改主机名为你自己的主机或IP,尽量不要使用中文注释) 依次执行start-dfs.sh,start-yarn.sh后jps查看namenode,datanode等是否启动,成功启动后启动history 阅读全文

posted @ 2018-08-18 21:22 tele 阅读(1918) 评论(0) 推荐(0) 编辑

hadoop 3.x Could not find or load main class org.apache.hadoop.mapreduce.v2.app.MRAppMaster

摘要：启动hdfs后执行share目录中自带的mapreduce程序时报如下错误找到$HADOOP_HOME/etc/mapred-site.xml,增加以下配置阅读全文

posted @ 2018-08-18 16:10 tele 阅读(6660) 评论(14) 推荐(0) 编辑

2018年8月17日

hadoop 3.x 无法访问hdfs(50070,8088)的web界面

摘要： 1.启动hadoop.然后netstat -nltp|grep 50070,如果,没有找到进程,说明没有配置web界面的端口修改hdfs-site,xml中加上如下配置再次启动后,netstat -nltp|grep 5070,仍然没有该端口号信息的话说明namenode可能没有成功启动,建议先j 阅读全文

posted @ 2018-08-17 23:13 tele 阅读(5378) 评论(0) 推荐(0) 编辑

ue 不能初始化ftp组件

摘要：进入到ue的安装目录下shift并右键-->在此处打开命令窗口,执行以下命令 regsvr32.exe wodFtpDLX.dll,如果是64位要执行regsvr32.exe wodFtpDLX64.dll regsvr32.exe wodTelnetDLX.ocx如果是64位要执行regsvr32 阅读全文

posted @ 2018-08-17 22:36 tele 阅读(1920) 评论(0) 推荐(0) 编辑

hadoop 3.x 单机集群配置/启动时的问题处理

摘要：一.修改配置文件(hadoop目录/etc/hadoop/配置文件) 1.修改hadoop-env.sh,指定JAVA_HOME 修改完毕后 2.修改core-site.xml 3.修改hdfs-site.xml 到这启动hadoop的基本配置已经完成了(配置完这些已经可以启动hadoop了),下面阅读全文

posted @ 2018-08-17 22:31 tele 阅读(2248) 评论(0) 推荐(0) 编辑

Centos 6.x 配置hadoop的环境变量

摘要： 1.安装jdk 原来是用的rpm安装的1.7,所以先使用rpm -qa|grep jdk,找到安装的1.7后 rpm -e --nodeps xxx.使用securecrt把官网下载的jdk-8u181-linux-x64.tar.gz上传(rz命令)到linux上,接着使用 tar -zxvf j 阅读全文

posted @ 2018-08-17 11:17 tele 阅读(1965) 评论(0) 推荐(0) 编辑

2018年8月15日

java lambda表达式以及Predicate接口

摘要：了解lambda之前先了解下什么是函数式接口,函数式接口即接口里必须有一个抽象方法(抽象的方法只能有一个,可以有其他的用default修饰的方法以及从Object继承的方法) jdk8里新增了一个@FunctionalInterface注解,这个注解标注此接口为函数式接口,但是并不是必须的,任何满足阅读全文

posted @ 2018-08-15 18:27 tele 阅读(4857) 评论(0) 推荐(0) 编辑

2018年8月14日

单例模式

摘要： Runtime类中就使用了饱汉式单例模式阅读全文

posted @ 2018-08-14 16:21 tele 阅读(177) 评论(0) 推荐(0) 编辑

2018年8月13日

笔记整理(一)

摘要：把大一,大二,大三学习时的笔记整理下,有的是课本上的,还有的记不清了 1.字节解码成字符,字符编码成字节 2.序列化与持久化对象序列化(实现Serializable接口),把对象序列化成流(或者反过来),方便存储即持久化(IO.JDBC) 多语言环境下,java序列化后存储的对象很难用其他语言还原阅读全文

posted @ 2018-08-13 20:58 tele 阅读(131) 评论(0) 推荐(0) 编辑

code never lies

公告