摘要: Windows 上静态编译 Libevent 2.0.10 并实现一个简单 HTTP 服务器大|中|小[2011-3-30 08:40 | by张宴] [文章作者:张宴 本文版本:v1.0 最后修改:2011.03.30 转载请注明原文链接:http://blog.zyan.cc/libevent... 阅读全文
posted @ 2014-11-06 15:35 手足无措 阅读(222) 评论(0) 推荐(0) 编辑
摘要: 主题:mysql中文乱码终结我自己都不知道为了中文问题烦恼了多少个日子,最恨瑞典人了-谁叫他发明了mysql,还设置了默认设置:latin1.曾经也在想假如中国人发明了mysql(mysee狗),呵呵,那么我们还有这样烦恼吗?默认的就是gk2312或者gbk.倘若考虑到台湾朋友加一个big5.就得了... 阅读全文
posted @ 2014-08-06 13:22 手足无措 阅读(203) 评论(0) 推荐(0) 编辑
摘要: 1.大数据在HBASE存储、计算以及查询的应用场景海量数据都是事务数据,事务数据都是在时间的基础上产生的。数据的业务时间可能会顺序产生,也可能不会顺序产生,比如某些事务发生在早上10点,但是在下午5点才结束闭并生成出来,这样的数据就会造成存储加载时的时间连续性。另外海量数据的挖掘后产生的是统计数据,... 阅读全文
posted @ 2014-05-08 16:22 手足无措 阅读(1252) 评论(0) 推荐(0) 编辑
摘要: hbase shell基础和常用命令详解HBase是一个分布式的、面向列的开源数据库,源于google的一篇论文《bigtable:一个结构化数据的分布式存储系统》HBase是Google Bigtable的开源实现,它利用Hadoop HDFS作为其文件存储系统,利用Hadoop MapReduc... 阅读全文
posted @ 2014-05-06 15:11 手足无措 阅读(221) 评论(0) 推荐(0) 编辑
摘要: Hive是基于Hadoop的一个数据仓库工具,可以将结构化的数据文件映射为一张数据库表,并提供完整的sql查询功能,可以将sql语句转换为MapReduce任务进行运行。其优点学习成本低,可以通过类SQL语句快速实现简单的MapReduce统计,不必开发专门的MapReduce应用,十分适合数据仓库... 阅读全文
posted @ 2014-05-06 10:43 手足无措 阅读(298) 评论(0) 推荐(0) 编辑
摘要: 首先 hadoop 和hbase版本需要对应,不然很多未知问题的 对应表如下Table2.1.Hadoop version support matrixHBase-0.92.xHBase-0.94.xHBase-0.96.0Hadoop-0.20.205SXXHadoop-0.22.xSXXHado... 阅读全文
posted @ 2014-05-05 13:07 手足无措 阅读(388) 评论(0) 推荐(0) 编辑
摘要: CentOS 6.4 64位 源码编译hadoop 2.2.0搭建环境:Centos 6.4 64bit1、安装JDK参考这里2、安装mavenmaven官方下载地址,可以选择源码编码安装,这里就直接下载编译好的wget http://mirror.bit.edu.cn/apache/maven/m... 阅读全文
posted @ 2014-04-30 10:24 手足无措 阅读(236) 评论(0) 推荐(0) 编辑
摘要: 安装与配置1.下载hive-0.12.0.tar.gz,并使用以下命令解压。 tar-zxvfhive-0.12.0.tar.gz解压后文件夹为:hive-0.12.02.移动hive-0.12.0到opt目录下,命令如下。 sudomvhive-0.12.0/opt/hive-0.12.03.设置... 阅读全文
posted @ 2014-04-29 15:52 手足无措 阅读(295) 评论(0) 推荐(0) 编辑
摘要: http://shiyanjun.cn/archives/561.htmlHadoop-2.2.0集群安装配置实践2013-12-26 20:14:42YanjunHadoop 2.x和1.x已经大不相同了,应该说对于存储计算都更加通用了。Hadoop 2.x实现了用来管理集群资源的YARN框架,可... 阅读全文
posted @ 2014-04-25 17:59 手足无措 阅读(460) 评论(0) 推荐(0) 编辑
摘要: 1.Hadoop2.2.0 datanode无法启动打印:FATAL org.apache.hadoop.hdfs.server.datanode.DataNode: Initialization failed for block pool Block pool解决方法:参考链接:http://st... 阅读全文
posted @ 2014-04-25 17:53 手足无措 阅读(235) 评论(0) 推荐(0) 编辑