2015年12月6日

hdfs 机架感知和复制因子的设置

摘要: dfs.replication 新更新的复制因子的参数对原来的文件不起作用。 譬如说,原来的复制因子是2,则原来文件上传的时候就只有两个副本。 现在把dfs.replication设置为3,重新启动hdfs.不会把原来2个副本的变成三个副本。 如果你需要这样,请执行下面的命令: hadoop fs -setrep -R 3 / 如果你只有2个datanode,但是... 阅读全文

posted @ 2015-12-06 21:47 tneduts 阅读(1974) 评论(0) 推荐(0) 编辑

hdfs-site.xml demo

该文被密码保护。 阅读全文

posted @ 2015-12-06 17:46 tneduts 阅读(2) 评论(0) 推荐(0) 编辑

Hadoop 文件的数量怎么比block的数量多?

摘要: Total files: 23 Total symlinks: 0 Total blocks (validated): 22 (avg. block size 117723 B) Minimally replicated blocks: 22 (100.0 %) Over-replicated blocks: 0 (0.0 %... 阅读全文

posted @ 2015-12-06 17:39 tneduts 阅读(1757) 评论(0) 推荐(0) 编辑

hadoop core-site.xml

摘要: fs.defaultFS hdfs://ochadoopcluster The name of the default file system. A URI whose scheme and authority determine the FileSystem implementatio... 阅读全文

posted @ 2015-12-06 08:42 tneduts 阅读(1411) 评论(1) 推荐(0) 编辑

导航