摘要: 1、protobuf是google公司提出的数据存储格式,详细介绍可以参考:https://developers.google.com/protocol-buffers 2、下载最新的protobuf,下载地址:https://code.google.com/p/protobuf/downloads 阅读全文
posted @ 2018-07-27 11:48 Zeus~ 阅读(832) 评论(0) 推荐(0) 编辑
摘要: hadoop Native Shared Libraries 使得Hadoop可以使用多种压缩编码算法,来提高数据的io处理性能。不同的压缩库需要依赖到很多Linux本地共享库文件,社区提供的二进制安装包,默认没有支持snappy这样在生产中最常用的压缩格式。而且社区没有提供64位的二进制安装包,在 阅读全文
posted @ 2018-07-27 11:44 Zeus~ 阅读(267) 评论(0) 推荐(0) 编辑