随笔分类 -  Hadoop

Hadoop相关
wordcount源代码详解
摘要：package wordcount; import java.io.IOException; import java.util.StringTokenizer; import org.apache.hadoop.conf.Configuration; import org.apache.hadoop 阅读全文
posted @ 2017-04-14 16:34 hare101 阅读(5040) 评论(0) 推荐(0)
ZooKeeper Getting Started Guide
摘要：http://zookeeper.apache.org/doc/trunk/zookeeperStarted.htmlWhat is ZooKeeper?ZooKeeper is a centralized service for maintaining configuration informat... 阅读全文
posted @ 2014-10-22 15:43 hare101 阅读(344) 评论(0) 推荐(0)
The Apache HBase™ Reference Guide
摘要：以下内容由http://hbase.apache.org/book.html#getting_started节选并改编而来。运行环境：hadoop-1.0.4，hbase-0.94.22，jdk1.7.0_65Chapter1.Getting Startedcreate a table in HBa... 阅读全文
posted @ 2014-10-22 12:40 hare101 阅读(1317) 评论(0) 推荐(0)
Understanding HBase and BigTable
摘要：Hbase is a distributed data storage systems.A Bigtable is spare , distributed , persistent multidimensional sorted map. The map is indexed by a row ke... 阅读全文
posted @ 2014-10-22 08:53 hare101 阅读(378) 评论(0) 推荐(0)
Hadoop日志文件
摘要：初学者运行MapReduce作业时，经常会遇到各种错误，往往不知所云，一般直接将终端打印的错误贴到搜索引擎上查找，以借鉴前人的经验。对于hadoop而言，当遇到错误时，第一时间应是查看日志，日志里通产会有详细的错误原因提示。Hadoop MapReduce日志分为两部分，一部分是服务日志，一部分是作... 阅读全文
posted @ 2014-10-07 13:41 hare101 阅读(2985) 评论(0) 推荐(0)
Hadoop Java API 操作 hdfs--1
摘要：Hadoop文件系统是一个抽象的概念，hdfs仅仅是Hadoop文件系统的其中之一。就hdfs而言，访问该文件系统有两种方式：（1）利用hdfs自带的命令行方式，此方法类似linux下面的shell命令；（2）利用hdfs的java接口，通过编写java程序来实现。操作环境：hadoop-1.0.4... 阅读全文
posted @ 2014-10-07 07:54 hare101 阅读(1846) 评论(0) 推荐(0)