摘要: 首先我们需要明确一个问题就是,hdfs中blocksize是物理概念是真的把数据进行了按块切分,而mapreduce 中的切片概念是逻辑层面的并没有真正按照切片大小对数据进行切分,只是按照预先规划好的切片数据根据偏移量读取数据,实现逻辑层面的分片。 以上我们了解了mapreduce的分片方式后,默认 阅读全文
posted @ 2018-09-03 16:18 苦苦地疼 阅读(1504) 评论(0) 推荐(0) 编辑
摘要: 通常我们常见的java命令执行java程序为java jar 以及java cp 主要区别:java jar需要该jar为可执行jar,eclipse中export时需要选择runnable jar,java jar 直接执行时不需要指定主类; 而java cp 需要指定主类; java cp :j 阅读全文
posted @ 2018-09-03 16:04 苦苦地疼 阅读(1013) 评论(0) 推荐(0) 编辑