摘要: 转自:http://www.bcmeng.com/hbase-basic/HBase是什么HBase构建在 HDFS 之上的分布式列式键值存储系统。HBase内部管理的文件全部存储在HDFS中。HBase VS HDFSHDFS适合批处理场景不支持数据随机查找不适合增量数据处理不支持数据更新HBas... 阅读全文
posted @ 2015-11-06 23:41 五三中 阅读(609) 评论(0) 推荐(0) 编辑
摘要: 转自:http://www.bcmeng.com/hbase-rowkey/建立SchemaHbase 模式建立或更新可以通过 Hbase shell 工具或者使用Hbase Java API 中的 Admin类。当列族发生变动时 hbase表必须处于 disabled 状态。例如:Configur... 阅读全文
posted @ 2015-11-06 23:38 五三中 阅读(1556) 评论(0) 推荐(0) 编辑
摘要: 转自:http://blog.csdn.net/jaytalent?viewmode=contentsMapReduce调度与执行原理系列文章一、MapReduce调度与执行原理之作业提交二、MapReduce调度与执行原理之作业初始化三、MapReduce调度与执行原理之任务调度四、MapRedu... 阅读全文
posted @ 2015-11-06 20:19 五三中 阅读(314) 评论(0) 推荐(0) 编辑
摘要: 转自: http://www.07net01.com/2015/10/944377.html下图是我在跟随马哥的脚步学习LVS过程中的学习笔记,以此为蓝本总结的,若有不足之处请谅解! 阅读全文
posted @ 2015-11-06 18:09 五三中 阅读(325) 评论(0) 推荐(0) 编辑
摘要: 转自:http://www.aboutyun.com/thread-10557-1-1.html问题导读1.Combiner的作用是什么?2.作业级别参数如何调优?3.任务及管理员级别有哪些可以调优?Hadoop为用户作业提供了多种可配置的参数,以允许用户根据作业特点调整这些参数值使作业运行效率达到... 阅读全文
posted @ 2015-11-06 18:05 五三中 阅读(663) 评论(0) 推荐(0) 编辑
摘要: 转自: http://www.aboutyun.com/thread-7678-1-1.html。。问题导读:1、什么是yarn?2、Yarn 和MapReduce相比,它有什么特殊作用 ?背景Yarn是一个分布式的资源管理系统,用以提高分布式的集群环境下的资源利用率,这些资源包括内存、IO、网络、... 阅读全文
posted @ 2015-11-06 17:14 五三中 阅读(4367) 评论(1) 推荐(0) 编辑
摘要: 转自:http://blog.csdn.net/yczws1/article/details/21899007纯干货:通过WourdCount程序示例:详细讲解MapReduce之Block+Split+Shuffle+Map+Reduce的区别及数据处理流程。 Shuffle过程是MapReduc... 阅读全文
posted @ 2015-11-06 16:41 五三中 阅读(1431) 评论(0) 推荐(0) 编辑
摘要: 转自:http://blog.csdn.net/yczws1/article/details/21794873.我们都安装完Hadoop之后,按照一些案例先要跑一个WourdCount程序,来测试Hadoop安装是否成功。在终端中用命令创建一个文件夹,简单的向两个文件中各写入一段话,然后运行Hado... 阅读全文
posted @ 2015-11-06 16:32 五三中 阅读(845) 评论(0) 推荐(0) 编辑
摘要: 转自:http://blog.csdn.net/letthinking/article/details/6764996 .数组的排序方法有很多,效率也各不相同,下面简单介绍一下几种常见的排序算法。 1.选择排序法:将要排序的数组分成两部分,一部分是从大到小已经排好序的,一部分是无序的,从无序的部... 阅读全文
posted @ 2015-11-06 11:17 五三中 阅读(394) 评论(0) 推荐(0) 编辑