6.hdfs的存储过程

1.hdfs 怎么存储

切割存储

2. 为何每块是128m

与io读写速度有关,一般人的接受速度1s中,而磁盘的读写速度为100m/s,在读取文件时候需要硬盘寻找地址,一般读懂速度和寻找之间的比例是1/100,比如我们设置寻址时间为10ms,那么整体读的时间为10ms * 100 = 1000ms = 1s, 100m/s * 1/s~=128M

3. 验证存储

4. 怎么分割存储

block0 Size大小为134217728
block1 Size大小为79874467
合并为214092195

5. 验证合并

#cp blk_1073741840 /root/  
#cp blk_1073741841 /root/
#cat blk_1073741841 >> blk_1073741840
#mv blk_1073741840 hadoop_blk.tar.gz
#tar xf hadoop_blk.tar.gz
posted @ 2017-06-25 00:16  刘耀  阅读(641)  评论(0编辑  收藏  举报