2014年9月28日

Hadoop集群_Eclipse开发环境设置

摘要： 1、Hadoop开发环境简介1.1 Hadoop集群简介 Java版本：jdk-6u31-linux-i586.bin Linux系统：CentOS6.0 Hadoop版本：hadoop-1.0.0.tar.gz 1.2 Windows开发简介 Java版本：jdk-6u31-windows... 阅读全文

posted @ 2014-09-28 11:18 病大虫 阅读(202) 评论(0) 推荐(0) 编辑

Hadoop集群_Hadoop安装配置

摘要： 1、集群部署介绍1.1 Hadoop简介 Hadoop是Apache软件基金会旗下的一个开源分布式计算平台。以Hadoop分布式文件系统（HDFS，Hadoop Distributed Filesystem）和MapReduce（Google MapReduce的开源实现）为核心的Hadoop为用... 阅读全文

posted @ 2014-09-28 11:16 病大虫 阅读(218) 评论(0) 推荐(0) 编辑

Hadoop集群_CentOS安装配置

摘要： 1、准备安装1.1 系统简介 CentOS 是什么？ CentOS是一个基于Red Hat 企业级 Linux 提供的可自由使用的源代码企业级的 Linux 发行版本。每个版本的 CentOS 都会获得七年的支持（通过安全更新方式）。新版本的 CentOS 每两年发行一次，而每个版本的 Cen... 阅读全文

posted @ 2014-09-28 11:11 病大虫 阅读(153) 评论(0) 推荐(0) 编辑

Hbase配置手册

摘要： 环境: 操作系统:ubuntu 12.10 64bit jdk:sun jdk 1.6 64bit hadoop:apache hadoop 1.02 hbase：apache hbase 0.92 先决条件:配置apache hadoop append,默认这个属性是false... 阅读全文

posted @ 2014-09-28 11:06 病大虫 阅读(164) 评论(0) 推荐(0) 编辑

MapReduce 读取和操作HBase中的数据

摘要： MapReduce 中如何处理HBase中的数据？如何读取HBase数据给Map？如何将结果存储到HBase中？ 2012-07-05 13:40 89人阅读 评论(0) 收藏 举报MapReduce 中如何处理HBase中的数据？如何读取HBase数据给Map？如何将结果存储到HBase中？Map... 阅读全文

posted @ 2014-09-28 11:01 病大虫 阅读(834) 评论(0) 推荐(0) 编辑

mapreduce中实现对hbase中表数据的添加

摘要： mapreduce中实现对hbase中表数据的添加 参考网址：http://www.javabloger.com/article/hadoop-mapreduce-hbase.html 根据参考网址中的小实例，自己亲自实现了一下，记录一下自己对该程序的一些理解。 实例：先将数据文件上传到HDFS，... 阅读全文

posted @ 2014-09-28 10:59 病大虫 阅读(309) 评论(0) 推荐(0) 编辑

HBase设计与开发性能优化(转)

摘要： 本文主要是从HBase应用程序设计与开发的角度，总结几种常用的性能优化方法。有关HBase系统配置级别的优化，这里涉及的不多，这部分可以参考：淘宝Ken Wu同学的博客。1. 表的设计1.1 Pre-Creating Regions默认情况下，在创建HBase表的时候会自动创建一个region分区，... 阅读全文

posted @ 2014-09-28 10:55 病大虫 阅读(168) 评论(0) 推荐(0) 编辑

HBase配置性能调优(转)

摘要： 因官方Book Performance Tuning部分章节没有按配置项进行索引，不能达到快速查阅的效果。所以我以配置项驱动，重新整理了原文，并补充一些自己的理解，如有错误，欢迎指正。配置优化zookeeper.session.timeout默认值：3分钟（180000ms）说明：RegionSer... 阅读全文

posted @ 2014-09-28 10:54 病大虫 阅读(152) 评论(0) 推荐(0) 编辑

通过Java Api与HBase交互(转)

摘要： HBase提供了Java Api的访问接口，掌握这个就跟Java应用使用RDBMS时需要JDBC一样重要，本文将继续前两篇文章中blog表的示例，介绍常用的Api。import java.io.IOException;import org.apache.hadoop.conf.Configurati... 阅读全文

posted @ 2014-09-28 10:53 病大虫 阅读(189) 评论(0) 推荐(0) 编辑

HBase Java API类介绍

摘要： 几个相关类与HBase数据模型之间的对应关系java类HBase数据模型HBaseAdmin数据库（DataBase)HBaseConfigurationHTable表（Table)HTableDescriptor列族（Column Family)Put列修饰符（Column Qualifier）... 阅读全文

posted @ 2014-09-28 10:52 病大虫 阅读(146) 评论(0) 推荐(0) 编辑

导航