05 2019 档案

摘要:Hadoop2.x较Hadoop1.x来说,变化非常大,主要主要体现在Hadoop2.x引入了“Yarn”这个核心部件。 hadoop1.x有两大部件,HDFS和MadpReduce,其中HDFS(Hadoop Distributed Files System)用于分布式存储文件,便于集群中各机器从 阅读全文
posted @ 2019-05-13 09:55 KamShing 阅读(525) 评论(0) 推荐(0)
摘要:说明: ( 1、安装JDK1.8+hadoop2.6+SSH:https://www.cnblogs.com/SysoCjs/p/10835793.html 2、安装hive1.2.2+mysql5.7:https://www.cnblogs.com/SysoCjs/p/10835954.html 阅读全文
posted @ 2019-05-13 09:45 KamShing 阅读(463) 评论(0) 推荐(0)
摘要:(关于搭建Hadoop环境,可参考:https://www.cnblogs.com/SysoCjs/p/10835793.html) 说明: #master,表示在master节点上操作; #master,#slave1,#slave2,表示在三个节点上都要操作; 一、安装Hive1.2.2 1、源 阅读全文
posted @ 2019-05-08 23:43 KamShing 阅读(1028) 评论(0) 推荐(0)
摘要:本篇介绍如何使用虚拟机搭建Hadoop集群,此例搭建1个master和2个slave,如要更多的slave,方法如此类推。 现在已经有安装了一台虚拟机, 1、查看虚拟机的虚拟网络,设置为NAT模式: 编辑——>虚拟网络编辑器 进入到虚拟网络编辑器界面后,单击VMnet8, 这里可以查看网关IP,默认 阅读全文
posted @ 2019-05-08 23:19 KamShing 阅读(1115) 评论(0) 推荐(0)