五三中 - 博客园

2015年11月13日

摘要：转自：http://www.cnblogs.com/chinacloud/archive/2010/12/03/1895369.html【一】HDFS简介HDFS的基本概念1.1、数据块(block)HDFS(Hadoop Distributed File System)默认的最基本的存储单位是64... 阅读全文

posted @ 2015-11-13 23:53 五三中阅读(352) 评论(0) 推荐(0) 编辑

Hadoop学习路线图

摘要：转自：http://blog.csdn.net/zhoudaxia/article/details/8801769按照这个路线图来学习即可。 1、M. Tim Jones的三篇文章：用Hadoop进行分布式数据处理第1部分（入门）：http://www.ibm.com/developerworks... 阅读全文

posted @ 2015-11-13 23:20 五三中阅读(2452) 评论(1) 推荐(0) 编辑

2015年11月9日

SecureCRT工具

摘要：技巧收集：文本文件内容复制该行内容yy，p粘贴2+yy复制两行dd 删除该行文件内容搜索非编辑状态/+查找内容查找指定行 :+行号阅读全文

posted @ 2015-11-09 21:37 五三中阅读(181) 评论(0) 推荐(0) 编辑

Eclipse使用技巧收集

摘要：因为学习Java相关，对Eclipse这个开发工具用的不习惯，许多操作以及快捷键在百度得到解决后下次又忘记了。有时使用VS又混淆了它的快捷键操作。所以写个备忘录持续更新收集平时遇到的操作。导入项目，发现很多地方报错，Remove '@override' annotation 原因是1.5和1.6之阅读全文

posted @ 2015-11-09 21:25 五三中阅读(459) 评论(0) 推荐(0) 编辑

2015年11月7日

如何确定 Hadoop map和reduce的个数--map和reduce数量之间的关系是什么？

摘要：转自：http://www.aboutyun.com/thread-6945-1-1.html阅读本文可以带着下面问题：1.map和reduce的数量过多会导致什么情况？2.Reduce可以通过什么设置来增加任务个数？3.一个task的map数量由谁来决定？4.一个task的reduce数量由谁来决... 阅读全文

posted @ 2015-11-07 11:38 五三中阅读(5393) 评论(0) 推荐(0) 编辑

2015年11月6日

HBase基本概念

摘要：转自：http://www.bcmeng.com/hbase-basic/HBase是什么HBase构建在 HDFS 之上的分布式列式键值存储系统。HBase内部管理的文件全部存储在HDFS中。HBase VS HDFSHDFS适合批处理场景不支持数据随机查找不适合增量数据处理不支持数据更新HBas... 阅读全文

posted @ 2015-11-06 23:41 五三中阅读(609) 评论(0) 推荐(0) 编辑

Hbase Rowkey设计

摘要：转自：http://www.bcmeng.com/hbase-rowkey/建立SchemaHbase 模式建立或更新可以通过 Hbase shell 工具或者使用Hbase Java API 中的 Admin类。当列族发生变动时 hbase表必须处于 disabled 状态。例如：Configur... 阅读全文

posted @ 2015-11-06 23:38 五三中阅读(1556) 评论(0) 推荐(0) 编辑

MapReduce调度与执行原理系列文章

摘要：转自：http://blog.csdn.net/jaytalent?viewmode=contentsMapReduce调度与执行原理系列文章一、MapReduce调度与执行原理之作业提交二、MapReduce调度与执行原理之作业初始化三、MapReduce调度与执行原理之任务调度四、MapRedu... 阅读全文

posted @ 2015-11-06 20:19 五三中阅读(314) 评论(0) 推荐(0) 编辑

LVS学习笔记及总结（思维导图版）

摘要：转自： http://www.07net01.com/2015/10/944377.html下图是我在跟随马哥的脚步学习LVS过程中的学习笔记，以此为蓝本总结的，若有不足之处请谅解！阅读全文

posted @ 2015-11-06 18:09 五三中阅读(325) 评论(0) 推荐(0) 编辑

hadoop MapReduce - 从作业、任务（task）、管理员角度调优

摘要：转自：http://www.aboutyun.com/thread-10557-1-1.html问题导读1.Combiner的作用是什么？2.作业级别参数如何调优？3.任务及管理员级别有哪些可以调优？Hadoop为用户作业提供了多种可配置的参数，以允许用户根据作业特点调整这些参数值使作业运行效率达到... 阅读全文

posted @ 2015-11-06 18:05 五三中阅读(663) 评论(0) 推荐(0) 编辑

cxzdy

公告