摘要: 最近一段时间工作涉及到hbase sql查询和可视化展示的工作,hbase作为列存储,数据单一为二进制数组,本身就不擅长sql查询;而且有hive来作为补充作为sql查询和存储,但是皮皮虾需要低延迟的sql及复杂sql的查询(根据值查找数据的情况),这就要用到hbase的二级索引。这里的二级索引方式 阅读全文
posted @ 2019-09-10 16:45 wanchen 阅读(574) 评论(0) 推荐(0) 编辑
摘要: 最近准备开始研究Hbase源码,因为第一次研究源码,所以做片笔记,踩坑踩的很耗时。1.我用的IDE是IDEA,本地window需要配置JDK,MAVEN,HADOOP环境2.上GitHub下载Hbase源码(可以... 阅读全文
posted @ 2019-07-31 09:45 wanchen 阅读(393) 评论(0) 推荐(0) 编辑
摘要: 用的apache Hadoop3.X,今天运行MR报错:找不到或无法加载主类 org.apache.hadoop.mapreduce.v2.app.MRAppMaster 关键需要配置两个配置:mapred-si... 阅读全文
posted @ 2019-07-26 15:23 wanchen 阅读(1541) 评论(0) 推荐(0) 编辑
摘要: 首先说说关于Jenkins集成Sonar的相关配置:我jenkins与Sonar不在同一个服务器上!先现在 SonarQube Scanner 插件。SonarQube Servers:系统配置全局工具配置:So... 阅读全文
posted @ 2019-07-04 14:16 wanchen 阅读(596) 评论(0) 推荐(0) 编辑
摘要: 很多同学可能第一次了解什么是ci-cd,什么是Jenkins,首先会介绍下cicd的概念及应用场景,之后再详细介绍下Jenkins的概念、安装及使用。什么是CI-CD?首先明确CI-CD是一种技术,而并不是指一个... 阅读全文
posted @ 2019-07-03 10:13 wanchen 阅读(1205) 评论(0) 推荐(1) 编辑
摘要: 推荐:官网创建插件案例:https://jenkins.io/doc/developer/tutorial/run/官方的这篇文章讲的很详细了,我就补充补充其中遇到的一些问题。前置条件:maven3.0以上、jd... 阅读全文
posted @ 2019-07-03 09:23 wanchen 阅读(240) 评论(0) 推荐(0) 编辑
摘要: 注意:下载Jenkins插件源码后报错Messages这个类怎么导包都报编译错误的问题!今天从GitHub下载了Jenkins的一些插件源码,准备自己研究研究写个插件。但是发现每个源码中都存在一个编译错误。那就是... 阅读全文
posted @ 2019-07-02 10:23 wanchen 阅读(158) 评论(1) 推荐(1) 编辑
摘要: zookeeper与Kafka集群安装集群安装以三台机器(虚拟机,物理机等等)为例子:192.168.200.100 kafka01 ... 阅读全文
posted @ 2019-06-06 10:20 wanchen 阅读(224) 评论(0) 推荐(0) 编辑
摘要: 一、JSON对格式化数据的操作:1.导入依赖包:import org.json.JSONArray;import org.json.JSONException;import org.json.JSONObject... 阅读全文
posted @ 2019-05-23 17:45 wanchen 阅读(249) 评论(0) 推荐(0) 编辑
摘要: 编写shell脚本,用于启动、关闭jar程序:#!/bin/bash#description: 启动重启server服务 #需要配置环境变量后才能直接使用java这些变量export JAVA_HOME=/dat... 阅读全文
posted @ 2019-05-14 11:01 wanchen 阅读(869) 评论(0) 推荐(0) 编辑