摘要: 在GitHub上去找工具并把地址克隆下来 在本地创建一个文件夹,文件夹内右击 (建议路径为英文,并保证本机有github的软件: https://jingyan.baidu.com/article/9f7e7ec0b17cac6f2815548d.html) 出现git命令行框 输入 git 复制的 阅读全文
posted @ 2018-07-24 16:10 陶雨洁 阅读(3896) 评论(2) 推荐(1) 编辑
摘要: #首先我们要在本机进行一些配置 在本机配置环境变量(控制面板->高级系统设置->环境变量->) #用cmd检测是否配置成功 如果你在ideaUI里,配置好了之后。我们现在来打架包 #在项目的terminal视图中运行mvn clean package (第一次还真慢慢需要下载打包的插件,ps:需要要 阅读全文
posted @ 2018-07-24 15:55 陶雨洁 阅读(223) 评论(0) 推荐(0) 编辑
摘要: combiner相当于是一个本地的reduce,它的存在是为了减少网络的负担,在本地先进行一次计算再叫计算结果提交给reduce进行二次处理。 现在的流程为: 对于combiner我们有这些理解: Mapper代码展示: package com.nenu.mprd.test; import java 阅读全文
posted @ 2018-07-24 15:53 陶雨洁 阅读(235) 评论(0) 推荐(0) 编辑
摘要: 1.新建New 注意:第一次创建maven项目需要在有网情况下进行 2.可以看见我们建立的项目了 阅读全文
posted @ 2018-07-24 15:51 陶雨洁 阅读(190) 评论(0) 推荐(0) 编辑
摘要: Mapreduce前提工作 简单的来说map是大数据,reduce是计算<运行时如果数据量不大,但是却要分工做这就比较花时间了> 首先想要使用mapreduce,需要在linux中进行一些配置: 1.在notepad++里修改yarn-site.xml文件,新添加 <property> <name> 阅读全文
posted @ 2018-07-24 15:00 陶雨洁 阅读(450) 评论(0) 推荐(0) 编辑