2020年3月24日
摘要: 1.集群间数据拷贝 1.1 scp实现两个远程主机之间的文件复制 scp -r hello.txt root@hadoop103:/user/luomk/hello.txt // 推 push scp -r root@hadoop103:/user/luomk/hello.txt hello.txt 阅读全文
posted @ 2020-03-24 17:55 wnwn 阅读(137) 评论(0) 推荐(0) 编辑
摘要: 1.DataNode工作机制 1.一个数据块在DataNode上以文件形式存储在磁盘上,包括两个文件,一个是数据本身,一个是元数据包括数据块的长度,块数据的效验和,以及时间戳; 2.DataNode启动后向NameNode注册,通过后,周期性的向NameNode上报所有的块信息; 3.心跳是每三秒一 阅读全文
posted @ 2020-03-24 17:19 wnwn 阅读(267) 评论(0) 推荐(0) 编辑
摘要: 1.NN和2NN工作机制 第一阶段:NameNode启动 (1) 第一次启动NameNode格式化后,创建fsimage和edits文件,如果不是第一次启动,直接加载编辑日志和镜像文件到内存; (2) 客户端对元数据进行增删改的请求; (3) NameNode记录操作日志,更新滚动日志; (4) N 阅读全文
posted @ 2020-03-24 11:58 wnwn 阅读(240) 评论(0) 推荐(0) 编辑