会员
周边
众包
新闻
博问
闪存
赞助商
Chat2DB
所有博客
当前博客
我的博客
我的园子
账号设置
会员中心
简洁模式
...
退出登录
注册
登录
Syso(Alt+/)Cjs
博客园
首页
新随笔
联系
管理
订阅
05 2019 档案
Hadoop2.x——Yarn原理
摘要:Hadoop2.x较Hadoop1.x来说,变化非常大,主要主要体现在Hadoop2.x引入了“Yarn”这个核心部件。 hadoop1.x有两大部件,HDFS和MadpReduce,其中HDFS(Hadoop Distributed Files System)用于分布式存储文件,便于集群中各机器从
阅读全文
posted @
2019-05-13 09:55
KamShing
阅读(525)
评论(0)
推荐(0)
CentOS7安装scala2.11.8+spark2.0.2
摘要:说明: ( 1、安装JDK1.8+hadoop2.6+SSH:https://www.cnblogs.com/SysoCjs/p/10835793.html 2、安装hive1.2.2+mysql5.7:https://www.cnblogs.com/SysoCjs/p/10835954.html
阅读全文
posted @
2019-05-13 09:45
KamShing
阅读(463)
评论(0)
推荐(0)
CentOS7搭建Hive1.2.2+mysql5.7
摘要:(关于搭建Hadoop环境,可参考:https://www.cnblogs.com/SysoCjs/p/10835793.html) 说明: #master,表示在master节点上操作; #master,#slave1,#slave2,表示在三个节点上都要操作; 一、安装Hive1.2.2 1、源
阅读全文
posted @
2019-05-08 23:43
KamShing
阅读(1028)
评论(0)
推荐(0)
搭建集群环境(CentOS7+Hadoop2.6.1+SSH)
摘要:本篇介绍如何使用虚拟机搭建Hadoop集群,此例搭建1个master和2个slave,如要更多的slave,方法如此类推。 现在已经有安装了一台虚拟机, 1、查看虚拟机的虚拟网络,设置为NAT模式: 编辑——>虚拟网络编辑器 进入到虚拟网络编辑器界面后,单击VMnet8, 这里可以查看网关IP,默认
阅读全文
posted @
2019-05-08 23:19
KamShing
阅读(1115)
评论(0)
推荐(0)
公告