Fork me on GitHub
摘要: 一.前述 Mapreduce可以自定义Inputforma对象和OutPutformat对象,所以原理上Mapreduce可以和任意输入源结合。 二.步骤 将结果写会到hbase中去。 2.1 Main函数 2.2 Mapper函数(和正常的Mapper没啥区别) 2.3 Reduce函数(主要是把 阅读全文
posted @ 2018-01-16 23:39 L先生AI课堂 阅读(443) 评论(0) 推荐(0) 编辑
摘要: 一.前述 HBase优化能够让我们对调优有一定的理解,当然企业并不是所有的优化全都用,优化还要根据业务具体实施。 二.具体优化 1.表的设计 1.1 预分区 默认情况下,在创建HBase表的时候会自动创建一个region分区,当导入数据的时候,所有的HBase客户端都向这一个region写数据,直到 阅读全文
posted @ 2018-01-16 23:19 L先生AI课堂 阅读(11379) 评论(0) 推荐(0) 编辑
摘要: Nginx安装步骤: 1.依赖 gcc openssl-devel pcre-devel zlib-devel 安装:yum install gcc openssl-devel pcre-devel zlib-devel -y2. 安装Nginx./configure 3. make && make 阅读全文
posted @ 2018-01-16 18:47 L先生AI课堂 阅读(328) 评论(0) 推荐(0) 编辑
摘要: 一.前述。 Hbase shell启动命令窗口,然后再Hbase shell中对应的api命令如下。 二.说明 Hbase shell中删除键是空格+Ctrl键。 三.代码 1.封装所有的API 2.原始Api 解析: 1. String rowkey = pnum + "_" + (Long.MA 阅读全文
posted @ 2018-01-16 18:32 L先生AI课堂 阅读(2206) 评论(0) 推荐(0) 编辑