会员
周边
捐助
新闻
博问
闪存
赞助商
Chat2DB
所有博客
当前博客
我的博客
我的园子
账号设置
简洁模式
...
退出登录
注册
登录
bitbitbyte
博客园
首页
新随笔
联系
订阅
管理
2020年7月13日
hdfs的写流程以及namenode,datanode挂掉后处理
摘要: HDFS写流程 client -> namenode: 请求上传第一个block -> 收到可上传的节点(距离感知, 机架感知) -> 节点之间建立通信管道 -> 以Packet为单位传输数据(Packet中的单位chunk, 默认512B, 并校验) -> 传输完成后再次向namenode请求, 上传下一个block 通信管道建立后, 确认队列(ack queue)等待传输结果, ...
阅读全文
posted @ 2020-07-13 10:22 bitbitbyte
阅读(577)
评论(0)
推荐(0)
编辑
公告