java 自定义注解(3)
摘要:注解1: 带参数: @Target({ElementType.TYPE}) @Retention(RetentionPolicy.RUNTIME) public @interface TableRef { String value(); } 注解2: @Target({ElementType.FIE
阅读全文
posted @
2019-12-26 16:24
lshan
阅读(156)
推荐(0) 编辑
kafka cusumer --java(no springboot)
摘要:依赖: <dependency> <groupId>org.apache.kafka</groupId> <artifactId>kafka-clients</artifactId> <version>2.1.1</version> </dependency> consumer.properties
阅读全文
posted @
2019-12-25 16:46
lshan
阅读(538)
推荐(0) 编辑
springboot集成hbase
摘要:springboot-habse: https://github.com/spring-projects/spring-hadoop-samples/tree/master/hbase 依赖: <dependency> <groupId>org.springframework.data</group
阅读全文
posted @
2019-12-25 15:17
lshan
阅读(6944)
推荐(0) 编辑
mysql 到 Hbase 数据如何实时同步---streamsets
摘要:参考:https://juejin.im/post/5c4aa7266fb9a049d61de727
阅读全文
posted @
2019-12-23 09:46
lshan
阅读(702)
推荐(0) 编辑
局域网两台内鼠标键盘共用(类似vnc)
摘要:参考:https://blog.csdn.net/weixin_41995979/article/details/81990179
阅读全文
posted @
2019-12-20 16:09
lshan
阅读(387)
推荐(0) 编辑
Flume与kafka集成
摘要:tailDir 启动: bin/flume-ng agent --conf conf --conf-file job/taildirSource-kafka.conf --name a1 -Dflume.root.logger=INFO,console flume# taildirSource-ka
阅读全文
posted @
2019-12-20 15:32
lshan
阅读(987)
推荐(0) 编辑
hbase 可视化工具 HBaseXplorer---HbaseGUI
摘要:HBase图形界面管理工具HBaseXplorer HBaseXplorer 是一款HBase管理工具,采用JAVA界面方式,查看和管理数据都很发布.HBaseXplorer原名为 hbase-gui-admin ,是由 zpasal 开发的一款HBase管理工具下载地址:https://githu
阅读全文
posted @
2019-12-20 13:50
lshan
阅读(22519)
推荐(0) 编辑
sqoop 集成 hbase(1)
摘要:2.7、与Sqoop的集成 Sqoop supports additional import targets beyond HDFS and Hive. Sqoop can also import records into a table in HBase. 之前我们已经学习过如何使用Sqoop在H
阅读全文
posted @
2019-12-20 11:47
lshan
阅读(523)
推荐(0) 编辑
Hbase java API test
摘要:依赖: <dependencies> <dependency> <groupId>org.apache.hbase</groupId> <artifactId>hbase-server</artifactId> <version>1.3.6</version> </dependency> <depe
阅读全文
posted @
2019-12-20 11:06
lshan
阅读(667)
推荐(0) 编辑
zookeeper客户端管理工具---ZooInspector
摘要:参考:https://blog.csdn.net/qq_34173549/article/details/80598056 zookeeper 的监控工具 公司很多产品会使用zookeeper,比如Meta消息中间件,在测试的过程中,我们经常需要查询zookeeper里面的信息来精确定位问题。目前项
阅读全文
posted @
2019-12-19 16:43
lshan
阅读(867)
推荐(0) 编辑
hdfs 配置多个namenode
摘要:参考:https://blog.csdn.net/wild46cat/article/details/53423472 hadoop2.7.3在集群中配置多个namenode(federation cluster)首先需要说明的是,在集群中配置多个namenode和在集群中使用secondaryNa
阅读全文
posted @
2019-12-18 17:46
lshan
阅读(4417)
推荐(0) 编辑
java8 集合求差集、并集、交集(flatMap)
摘要:@Test public void test1(){ List<Integer> list1=new ArrayList<>(); list1.add(1); list1.add(2); list1.add(3); List<Integer> list2=new ArrayList<>(); lis
阅读全文
posted @
2019-12-12 15:09
lshan
阅读(1079)
推荐(0) 编辑
java -jar java -cp
摘要:jar 包启动时指定配置文件 application.yml nohup java -jar vPaas.jar --spring.config.location=/opt/vpaas-conf/application.yml > /opt/vpaas-conf/nohup.out 2>&1 & j
阅读全文
posted @
2019-12-11 14:42
lshan
阅读(1242)
推荐(0) 编辑
jpa ExampleMatcher Example
摘要:官网文档:https://docs.spring.io/spring-data/jpa/docs/current/reference/html/#query-by-example.usage Person person = new Person(); person.setFirstname("Dav
阅读全文
posted @
2019-12-10 18:16
lshan
阅读(2999)
推荐(0) 编辑
mongo DB 备份与恢复(转)
摘要:mongoexport作用 ==》mongoexport --helpmongoexport这个工具的作用就是Export data from MongoDB in CSV or JSON format.。将MongoDB中的数据导出为csv或者json格式。 CSVCSV(Comma-Separa
阅读全文
posted @
2019-12-09 16:54
lshan
阅读(150)
推荐(0) 编辑
mongo 副本集,分片
摘要:参考:https://blog.csdn.net/qq_37142346/article/details/82824132 docker 版本的副本集:参考:https://www.cnblogs.com/cowboys/p/9264494.html 参考这个,比较详细: https://www.c
阅读全文
posted @
2019-12-09 16:49
lshan
阅读(366)
推荐(0) 编辑
python数据分析之 pandas
摘要:参考该兄弟写的就可以了:https://www.jianshu.com/p/546839bbde8c
阅读全文
posted @
2019-12-08 21:18
lshan
阅读(159)
推荐(0) 编辑
python 数据清洗之数据合并、转换、过滤、排序(转)
摘要:原文:https://blog.csdn.net/xwd18280820053/article/details/70655144 数据合并 在pandas中可以通过merge对数据进行合并操作。 import numpy as np import pandas as pd data1 = pd.Da
阅读全文
posted @
2019-12-08 21:12
lshan
阅读(1285)
推荐(0) 编辑
poi 导出excel (test 版) 2. 读取模板,写入数据
摘要:1. 基本导出 2. 读取模板,填写数据 1. 基本导出 /** * query and filter req by Sun * @throws Exception */ @Test public void testQueryWorkNos() throws Exception { System.e
阅读全文
posted @
2019-12-06 17:33
lshan
阅读(324)
推荐(0) 编辑
poi 解析excel (test 版)
摘要:/** * 解析excel */ @Test public void testPassExcel() throws Exception { // 从 template.xls 文件中读取数据,并保存到 ArrayList<Area> 中后打印输出。 // 1、获取文件输入流 InputStream
阅读全文
posted @
2019-12-06 16:24
lshan
阅读(304)
推荐(0) 编辑
ufw ubuntu
摘要:link:https://www.jianshu.com/p/9b58a81269e7查看防火墙状态 sudo ufw status 开启/关闭防火墙 sudo ufw enable|disable 设置默认策略 sudo ufw default allow|deny UFW 使用范例: 允许 53
阅读全文
posted @
2019-12-06 15:25
lshan
阅读(118)
推荐(0) 编辑
java追加写入txt文件 (写文件)
摘要:原文:https://www.cnblogs.com/zhenxiangyue/p/10900319.html 参考:https://www.cnblogs.com/wangcp-2014/p/5851986.html 方法1: public void method1() { FileWriter
阅读全文
posted @
2019-12-05 13:47
lshan
阅读(4991)
推荐(0) 编辑