摘要: 组成部分 Shuffle阶段分为两部分:Map端和Reduce端。 Sort阶段就是对Map端输出的key进行排序。 第一部分:Map端Shuffle 对于输入文件,会进行分片,对于一个split,有一个map任务进行处理,每个Map在内存中都有一个缓存区,map的输... 阅读全文
posted @ 2015-11-18 12:38 丶大雄 阅读(6410) 评论(1) 推荐(1) 编辑
摘要: Java中提供的日志类:org.apache.log4j.Logger 添加log4j jar包 配置log4j属性文件:log4j.properties log4j.rootLogger = debug,D log4j.appender.D = org.apache.log4j... 阅读全文
posted @ 2015-11-16 22:37 丶大雄 阅读(154) 评论(0) 推荐(0) 编辑
摘要: 一、安装NFS服务器端 (192.168.228.137) 1、安装nfs-kernel-server 命令:sudo apt-get install nfs-kernel-server nfs依赖portmap。在安装nfs-kernel-server时,会自动安装portmap。 ... 阅读全文
posted @ 2015-11-10 18:44 丶大雄 阅读(370) 评论(0) 推荐(0) 编辑
摘要: 一 安装mysql-server1、安装mysql服务器端sudo apt-get install mysql-server2、登陆mysqlmysql -u root -p 注:-u 代表用户名;-p 代表密码3、使用mysql 1)展示数据库show databases; 2)使用某个... 阅读全文
posted @ 2015-11-10 18:18 丶大雄 阅读(269) 评论(0) 推荐(0) 编辑