2015 年 1月 6 日随笔档案 - lvyafei

2015年1月6日

摘要：原 Hadoop MapReduce 框架的问题对于业界的大数据存储及分布式处理系统来说，Hadoop 是耳熟能详的卓越开源分布式文件存储及处理框架，对于 Hadoop 框架的介绍在此不再累述，读者可参考Hadoop 官方简介。使用和学习过老 Hadoop 框架（0.20.0 及之前版本）的同仁应该... 阅读全文

posted @ 2015-01-06 23:54 lvyafei 阅读(266) 评论(0) 推荐(0) 编辑

MapReduce工作原理讲解

摘要：有时候我们在用，但是却不知道为什么。就像苹果砸到我们头上，这或许已经是很自然的事情了，但是牛顿却发现了地球的万有引力。ok了，希望通过了解MapReduce，我们能够写出更好的MapReduce例子。第一部分：MapReduce工作原理MapReduce 角色•Client ：作业提交发起者。•Jo... 阅读全文

posted @ 2015-01-06 23:49 lvyafei 阅读(280) 评论(0) 推荐(0) 编辑

HBase入门篇

摘要：目录：1-HBase的安装2-Java操作HBase例子3-HBase简单的优化技巧4–存储5(集群) -压力分载与失效转发6 -白话MySQL(RDBMS)与HBase之间7 -安全&权限1-HBase的安装HBase是什么？HBase是Apache Hadoop中的一个子项目，Hbase依托于H... 阅读全文

posted @ 2015-01-06 23:31 lvyafei 阅读(294) 评论(0) 推荐(0) 编辑

谷歌三大核心技术（一）Google File System中文版

摘要： http://www.open-open.com/lib/view/open1328763454608.html 阅读全文

posted @ 2015-01-06 23:24 lvyafei 阅读(237) 评论(0) 推荐(0) 编辑

【Hadoop】HDFS的运行原理

摘要：简介HDFS（Hadoop Distributed File System ）Hadoop分布式文件系统。是根据google发表的论文翻版的。论文为GFS（Google File System）Google 文件系统（中文，英文）。HDFS有很多特点： ①保存多个副本，且提供容错机制，副本丢失或宕机... 阅读全文

posted @ 2015-01-06 23:21 lvyafei 阅读(183) 评论(0) 推荐(0) 编辑

lvyafei

公告