摘要:
Hadoop--之RPC开发 介绍: 百度百科: RPC(Remote Procedure Call)—远程过程调用,它是一种通过网络从远程计算机程序上请求服务,而不需要了解底层网络技术的协议。RPC协议假定某些传输协议的存在,如TCP或UDP,为通信程序之间携带信息数据。在OSI网络通信模型中,R 阅读全文
摘要:
Exception in thread "main" java.lang.NullPointerException问题的解决 解决: 首先我们来分析下这个问题,我是使用debug测试看哪里是空的。 然后跑去百度了一下,发现好像是关于环境没有配置啊!!! 给出两种解决方案: 1.在代码的第一行加 2. 阅读全文
摘要:
Java-API对HDFS的操作 哈哈哈哈,深夜来一波干货哦!!! Java-PAI对hdfs的操作,首先我们建一个maven项目,我主要说,我们可以通过Java代码来对HDFS的具体信息的打印,然后用java代码实现上传文件和下载文件,以及对文件的增删。 首先来介绍下如何将java代码和HDFS联 阅读全文
摘要:
MYSQL--服务器的安装 学java已经好久了,但是还是没有学会安装数据库,这次重装系统后自己学了学,昨天晚上刚刚装好,卸载了,再装一次,就想着把它笔记下来。要不又忘了。。 1.删除你的服务。在cmd中输入net stop mysql //停止服务 sc delete mysql//删除服务(这里 阅读全文
摘要:
hu-hadoop1: mv: cannot stat `/home/bigdata/hadoop-2.6.0/logs/hadoop-root-datanode-hu-hadoop1.out.4': No such file or directory 看了好久没发现。。。。 后来删了个东西就好了 阅读全文
摘要:
WARN util.NativeCodeLoader: Unable to load native-hadoop library for your platform... using builtin-java classes where applicable starting yarn daemon 阅读全文
摘要:
Unable to load native-hadoop library for your platform... using builtin-java classes where applicable Starting namenodes on [localhost] hadoop初学者:哈哈哈哈 阅读全文
摘要:
Shelld的连接7步 · · huhu_k: 想和你相遇。 阅读全文
摘要:
nameNode单点故障修复 1.启动虚拟机,启动集群 此时我们将主机hadoop1关机(断掉主机),开始抢救: 1.使用 秘书(secondaryNameNode),成功率不是100% (这里我们把hadoop44作为新的nameNode) 2.zookeeper第三方代替 方法一secondar 阅读全文
摘要:
静动态增删节点 初始: 这是我现在的集群 重新克隆一个虚拟机: hadoop44:datanode(静态增加,删除和动态删除) hadoop55:datanode(动态hdfs添加,yarn动态增删) 静态添加: 1)修改hosts文件,让主可以认识它 vi /etc/hosts 2)设置无密码访问 阅读全文