mapreduce运行原理及YARN
摘要：mapreduce1回顾 mapreduce1的不足 yarn的基本架构 yarn工作流程
阅读全文
posted @ 2018-05-29 22:41
05 2018 档案
centos 7怎么通过图形界面来配置静态ip
摘要：除了通过修改配置文件的方法来配置静态ip,我们还可以通过图形界面来配置，这样做其实更加方便一点 先进入设置页面 选择网络 我这里是通过有线上网的，我们之间修改配置就可以了 选择ipv4,和manual方式 打开终端，通过ifconfig命令来查看你的网络信息 这里填的是你需要配置的ip，也就是你的静
阅读全文
posted @ 2018-05-27 16:21
centos7 真实机安装后没有网卡解决办法
摘要：我们在真实机安装完centos7版本后，会发现没有网卡，只有lo口 因为真实机不同你在虚拟机里面，这个时候我们不能连网，更加不要说配置什么静态ip了 是什么原因呢，是因为有些真实机安装了centos系统后没有网卡驱动，不知道大家在win7刚刚出来的时候在系统之家下载一个镜像安装了之后发现也是不能联网
阅读全文
posted @ 2018-05-26 00:45
通过mapreduce把mysql的数据读取到hdfs
摘要：前面讲过了怎么通过mapreduce把mysql的一张表的数据放到另外一张表中，这次讲的是把mysql的数据读取到hdfs里面去 具体怎么搭建环境我这里就不多说了。参考 通过mapreduce把mysql的一张表的数据导到另外一张表中 也在eclipse里面创建一个mapreduce工程 具体的实现
阅读全文
posted @ 2018-05-18 10:38
通过mapreduce把mysql的一张表的数据导到另外一张表中
摘要：怎么安装hadoop集群我在这里就不多说了，我这里安装的是三节点的集群 先在主节点安装mysql 启动mysql 登录mysql 创建数据库，创建表格，先把数据加载到表格 t ,表格t2是空的 配置一下mysql数据库 在eclipse创建mapreduce项目 在这里说一下我这里是安装的是hado
阅读全文
posted @ 2018-05-16 22:41
zookeeper启动报 Unexpected exception, exiting abnormally 错误
摘要：当我们在集群里启动zookeeper的时候,通过jps查看没有发现zookeeper进程 通过查看zookeeper日志 其实是因为2181端口被占用的原因！！！ 通过命令sudo netstat -nltp | grep 2181查看是那个进程占用了2181端口，然后把相应的进程kill掉 再次启
阅读全文
posted @ 2018-05-14 17:49
celipse关联hadoop源码
摘要：可以在这里下载hadoop的源码包 https://mirrors.tuna.tsinghua.edu.cn/apache/hadoop/common/ 我自己下载的是hadoop2.6.0的源码包 接下来确保你的电脑安装了jdk 和maven 安装protoc-2.5.0-win32 然后将里面的
阅读全文
posted @ 2018-05-14 10:12
