摘要: net.sf.json.JSONObject对时间戳的格式化处理 阅读全文
posted @ 2020-11-08 16:56 你学会了吗 阅读(958) 评论(0) 推荐(0) 编辑
摘要: Leaf的Github地址: https://github.com/Meituan-Dianping/Leaf Leaf美团技术团队博客地址: https://tech.meituan.com/2017/04/21/mt-leaf.html 关于Leaf的使用手册、架构说明、Segment和Snow 阅读全文
posted @ 2020-06-03 18:29 你学会了吗 阅读(1195) 评论(0) 推荐(1) 编辑
摘要: 简略介绍: Logstash是elastic技术栈中的一员。它是一个数据采集引擎,可以从数据库采集数据到es中。我们可以通过设置自增id主键或者时间来控制数据的自动同步,这个id或者时间就是用于给logstash进行识别哪些数据需要同步的。 使用ID的方式,假设表中有1000条数据,Logstats 阅读全文
posted @ 2020-05-24 11:14 你学会了吗 阅读(1020) 评论(0) 推荐(0) 编辑
摘要: 1.简略介绍 轻量型日志采集器,用于转发和汇总日志与文件。 官网: https://www.elastic.co/cn/beats/filebeat 2.本文实现的功能 3.事先必备: 至少一台Kafka节点。 4.配置Log4j,自定义代码中日志信息输出格式以及文件名称 <?xml version 阅读全文
posted @ 2020-05-23 22:06 你学会了吗 阅读(5346) 评论(0) 推荐(1) 编辑
摘要: 事先必备: kafka已安装完成 1.目录结构 2.父pom <project xmlns="http://maven.apache.org/POM/4.0.0" xmlns:xsi="http://www.w3.org/2001/XMLSchema-instance" xsi:schemaLoca 阅读全文
posted @ 2020-05-23 22:03 你学会了吗 阅读(436) 评论(0) 推荐(0) 编辑
摘要: 1.引入依赖 <dependencies> <dependency> <groupId>org.apache.kafka</groupId> <artifactId>kafka_2.12</artifactId> <version>2.2.0</version> </dependency> </de 阅读全文
posted @ 2020-05-23 21:59 你学会了吗 阅读(384) 评论(0) 推荐(0) 编辑
摘要: 事先必备: zookeeper 安装过程: ##下载地址: https://www.apache.org/dyn/closer.cgi?path=/kafka/2.5.0/kafka_2.12-2.5.0.tgz ## 解压缩: tar -zxvf kafka_2.12-2.1.0.tgz -C / 阅读全文
posted @ 2020-05-23 21:55 你学会了吗 阅读(190) 评论(0) 推荐(0) 编辑
摘要: 本文以在SpringBoot下集成ElasticJob的方式对其进行浅析,仅仅是简单使用,不涉及源码级别研究。 事先必备: 注册中心——zookeeper 简略结构: 代码目录结构: ├─.idea └─src └─main ├─java │ └─com │ └─sakura │ ├─configu 阅读全文
posted @ 2020-05-22 18:30 你学会了吗 阅读(582) 评论(0) 推荐(0) 编辑
摘要: 目的: 在程序运行期间,动态添加Bean进入到Spring容器。 目前使用到的场景: 对当当网的ElasticJob进行封装,通过自定义注解@ElasticJob的方式开启分布式定时任务。 当所有的Bean都初始化完成之后,读取使用了@ElasticJob注解的所有Bean,然后创建SpringJo 阅读全文
posted @ 2020-05-21 22:14 你学会了吗 阅读(7099) 评论(0) 推荐(0) 编辑
摘要: 目录结构: 一:自定义注解 package org.example.annotation; import java.lang.annotation.ElementType; import java.lang.annotation.Retention; import java.lang.annotat 阅读全文
posted @ 2020-05-21 18:29 你学会了吗 阅读(1189) 评论(0) 推荐(0) 编辑