Kafka1 利用虚拟机搭建自己的Kafka集群
摘要:前言: 上周末自己学习了一下Kafka,参考网上的文章,学习过程中还是比较顺利的,遇到的一些问题最终也都解决了,现在将学习的过程记录与此,供以后自己查阅,如果能帮助到其他人,自然是更好的。 长长的分割线 正文: 关于Kafka的理论介绍,网上可以搜到到很多的资料,大家可以自行搜索,我这里就不在重复赘
阅读全文
posted @
2015-09-29 11:51
Sky_YiBai
阅读(6043)
推荐(1) 编辑
ZooKeeper1 利用虚拟机搭建自己的ZooKeeper集群
摘要:前言: 前段时间自己参考网上的文章,梳理了一下基于分布式环境部署的业务系统在解决数据一致性问题上的方案,其中有一个方案是使用ZooKeeper,加之在大数据处理中,ZooKeeper确实起到协调服务的作用,所以利用周末休息时间,自己在虚拟机上简单搭建了一个ZooKeeper集群,学习了解一下。 长长
阅读全文
posted @
2015-09-20 16:46
Sky_YiBai
阅读(4688)
推荐(7) 编辑
Hadoop4 利用VMware搭建自己的hadoop集群
摘要:前言: 前段时间自己学习如何部署伪分布式模式的hadoop环境,之前由于工作比较忙,学习的进度停滞了一段时间,所以今天抽出时间把最近学习的成果和大家分享一下。 本文要介绍的是如何利用VMware搭建自己的hadoop的集群。如果大家想了解伪分布式的大家以及eclipse中的hadoop编程,...
阅读全文
posted @
2015-02-01 13:12
Sky_YiBai
阅读(13320)
推荐(2) 编辑
Hadoop3 在eclipse中访问hadoop并运行WordCount实例
摘要:前言: 毕业两年了,之前的工作一直没有接触过大数据的东西,对hadoop等比较陌生,所以最近开始学习了。对于我这样第一次学的人,过程还是充满了很多疑惑和不解的,不过我采取的策略是还是先让环境跑起来,然后在能用的基础上在多想想为什么。 通过这三个礼拜(基本上就是周六周日,其他时间都在加班啊T ...
阅读全文
posted @
2014-10-19 16:33
Sky_YiBai
阅读(6102)
推荐(1) 编辑
Hadoop2 自己动手编译Hadoop的eclipse插件
摘要:前言: 毕业两年了,之前的工作一直没有接触过大数据的东西,对hadoop等比较陌生,所以最近开始学习了。对于我这样第一次学的人,过程还是充满了很多疑惑和不解的,不过我采取的策略是还是先让环境跑起来,然后在能用的基础上在多想想为什么。 通过这三个礼拜(基本上就是周六周日,其他时间都在加班啊T ...
阅读全文
posted @
2014-10-12 14:05
Sky_YiBai
阅读(4902)
推荐(3) 编辑
Hadoop1 Centos伪分布式部署
摘要:前言: 毕业两年了,之前的工作一直没有接触过大数据的东西,对hadoop等比较陌生,所以最近开始学习了。对于我这样第一次学的人,过程还是充满了很多疑惑和不解的,不过我采取的策略是还是先让环境跑起来,然后在能用的基础上在多想想为什么。 通过这三个礼拜(基本上就是周六周日,其他时间都在加班啊T ...
阅读全文
posted @
2014-10-09 00:28
Sky_YiBai
阅读(2594)
推荐(1) 编辑