09 2015 档案
摘要:生成密钥ssh-keygen -t rsacp ~/.ssh/id_rsa.pub ~/.ssh/authorized_keys来自为知笔记(Wiz)
阅读全文
摘要:在这里我们选用4台机器进行示范,各台机器的职责如下表格所示hadoop0hadoop1hadoop2hadoop3是NameNode吗?是,属集群cluster1是,属集群cluster1是,属集群cluster2是,属集群cluster2是DataNode吗?否是是是是JournalNode吗?...
阅读全文
摘要:序列化1)什么是序列化 将结构化对象转换成字节流以便于进行网络传输或写入持久存储的过程。2)什么是反序列化 将字节流转化为一系列结构化对象的过程。序列化的用途 1)作为一种持久化格式 2)作为一种通信的数据格式 3)作为一种数据拷贝、克隆机制序列化的特征: 1)紧凑:Hadoop中最稀缺的资源是宽带,所以紧凑的序列化机制可以充分的利用宽带。 2)快速:通信...
阅读全文
摘要:hadoop2课程1.体系结构、源码编译 HDFS+MapReduce。共同点都是都是分布式的,主从关系结构。 HDFS是暴扣主节点NameNode,只有一个;还有从节点DataNode,有很多个。 NameNode含有我们用户存储的文件的元数据信息。把这些数据存放在硬盘上,但是在运行时是加载在内存中的。 缺点: (1)当我们的NameNode无法在内...
阅读全文
摘要:1 package Test; 2 import java.util.Scanner; 3 /** 4 * 设计一个计算器,实现多行输入,并分别输出结果 5 * 输入: 6 * 4/2+5+9*7-9 7 * 3*2+8/2-7+2 8 * 3+8*4-5+3+1 9 * ...
阅读全文
摘要:分布式系统原理一、分布式系统基础重要要点:对外提供无状态节点,内部实现具体有状态或者无状态节点逻辑,节点即可以是提供服务,也可以是存储数据。拜占庭问题,在分布式系统中的使用,目的是保证服务可用,而不是找出错误的节点,如果。异常常见情况,机器宕机、网络异常、消息丢失、消息乱序、数据错误、不可靠的TCP...
阅读全文