摘要:
不多说,直接上干货! 很多人搞不清输入流和输出流,!!、! 其实啊,输入流、输出流都是针对内存的。 往内存里写,是输入流。 内存往文件里写,是输出流。 比如一个文件A复制到另一文件B,那么,先写到内存里,再写到文件B。 => 则文件A写到内存里,叫输入流。 => 则内存里写到文件B,叫输出流。 对象 阅读全文
摘要:
不多说,直接上干货! docs/hdfs-default.html这里是hdfs参数的含义。其中可见 dfs.replication.min最小副本数 dfs.safemode.threshold.pct阈值比例 Specifies the percentage of blocks that sho 阅读全文
摘要:
不多说,直接上干货! hadoop fs: 使用面最广,可以操作任何文件系统。 hadoop dfs与hdfs dfs : 只能操作HDFS文件系统相关(包括与Local FS间的操作),前者已经Deprecated,一般使用后者。 以下内容参考自stackoverflow: Following a 阅读全文
摘要:
不多说,直接上干货! 问题现象 当执行创建文件的的时候, 即: 报错: 问题原因 1. 当前用户是Administrator ,不是hadoop用户 2. hadoop的默认的hdfs的文件目录是有权限的,要创建位置是目录是用文件权限的 说明 : 上面的String IR_PATH_1 = "hdf 阅读全文