12 2019 档案
kibana各类查询模式范例
摘要:GET _search { "query": { "match_all": {} } } GET /_cat/health?v GET /_cat/indices?v GET /_alias GET crash_index/_search GET /2019-06-18_crash_index/cr
阅读全文
ElasticSearch AggregationBuilders java api常用聚会查询
摘要:以球员信息为例,player索引的player type包含5个字段,姓名,年龄,薪水,球队,场上位置。 index的mapping为: "mappings": { "player": { "properties": { "name": { "index": "not_analyzed", "typ
阅读全文
elasticsearch的两种初始化方式以及matchQuery,termQuery, multiMatchQuery区别与实现
摘要:方式一:使用TransportClient方式: public ESConfiguration() { if(EnvUtils.isOnlineEnv()) { hostName = "xxxxx1"; hostName2 = "xxxx2"; hostName3 = "xxxx3"; port =
阅读全文
Flink SQL项目实录
摘要:一、Flink SQL层级 为Flink最高层的API,易于使用,所以应用更加广泛,eg. ETL、统计分析、实时报表、实时风控等。 Flink SQL所处的层级: 二、Flink聚合: 1、Window Aggregate 内置了三种常用的窗口: TUMBLE(time, INTERVAL '5'
阅读全文
数据库定时清理脚本配置
摘要:定时 数据库清理的两个脚本: 按天删除: #!/bin/bash ndate=3 datestr=`date -d "-$ndate day" +%Y-%m-%d` #生成ndate天前的日期,如: echo $datestr delSqlStr="DELETE FROM xxxx WHERE Ge
阅读全文
Redis知识点总结
摘要:Redis基础篇 Redis数据结构 String1、概念:string是redis最基本的类型,你可以理解成与Memcached一模一样的类型,一个key对应一个value。string类型是二进制安全的。意思是redis的string可以包含任何数据。比如jpg图片或者序列化的对象 。strin
阅读全文
nginx之配置proxy_set_header问题梳理
摘要:客户端请求web服务,客户端:ip:192.168.223.1 nginx作为反向代理服务器:192.168.223.136 nginx作为后端web服务器:192.168.223.137 前提条件: 配置nginx转发到后端服务器。 server { listen 8080; server_nam
阅读全文
Flink中案例学习--State与CheckPoint理解
摘要:1、State概念理解 在Flink中,按照基本类型,对State做了以下两类的划分:Keyed State, Operator State。 Keyed State:和Key有关的状态类型,它只能被基于KeyedStream之上的操作,方法所使用。我们可以从逻辑上理解这种状态是一个并行度操作实例和
阅读全文
Flink中API使用详细范例--window
摘要:正文前先来一波福利推荐: 福利一: 百万年薪架构师视频,该视频可以学到很多东西,是本人花钱买的VIP课程,学习消化了一年,为了支持一下女朋友公众号也方便大家学习,共享给大家。 福利二: 毕业答辩以及工作上各种答辩,平时积累了不少精品PPT,现在共享给大家,大大小小加起来有几千套,总有适合你的一款,很
阅读全文
storm是如何保证at least once语义的?
摘要:正文前先来一波福利推荐: 福利一: 百万年薪架构师视频,该视频可以学到很多东西,是本人花钱买的VIP课程,学习消化了一年,为了支持一下女朋友公众号也方便大家学习,共享给大家。 福利二: 毕业答辩以及工作上各种答辩,平时积累了不少精品PPT,现在共享给大家,大大小小加起来有几千套,总有适合你的一款,很
阅读全文
文件分段后,进行分片上传逻辑
摘要:正文前先来一波福利推荐: 福利一: 百万年薪架构师视频,该视频可以学到很多东西,是本人花钱买的VIP课程,学习消化了一年,为了支持一下女朋友公众号也方便大家学习,共享给大家。 福利二: 毕业答辩以及工作上各种答辩,平时积累了不少精品PPT,现在共享给大家,大大小小加起来有几千套,总有适合你的一款,很
阅读全文
总结几个最近处理问题中使用http协议的代码
摘要:正文前先来一波福利推荐: 福利一: 百万年薪架构师视频,该视频可以学到很多东西,是本人花钱买的VIP课程,学习消化了一年,为了支持一下女朋友公众号也方便大家学习,共享给大家。 福利二: 毕业答辩以及工作上各种答辩,平时积累了不少精品PPT,现在共享给大家,大大小小加起来有几千套,总有适合你的一款,很
阅读全文