摘要: 该博客属于转载,是很经典的一篇关于ES的介绍: Elasticsearch 是一个兼有搜索引擎和NoSQL数据库功能的开源系统,基于Java/Lucene构建,可以用于全文搜索,结构化搜索以及近实时分析。可以说Lucene是当今最先进,最高效的全功能开源搜索引擎框架。 说明: Lucene:只是一个 阅读全文
posted @ 2018-04-24 14:39 疯码牛Pro 阅读(1554) 评论(0) 推荐(0) 编辑
摘要: 一 滑动窗口 1)滑动窗口设置 2)窗口对齐 3)窗口的调优,能否正常触发 数据丢失问题 retry 事件延时(late arrival events) 五分钟批量和24小时批量补给 二 ignite 1)多个client出现,集群串联 2)宕机后数据丢失 3)数据持久化 三 批量文件发送 用spa 阅读全文
posted @ 2018-03-26 15:57 疯码牛Pro 阅读(195) 评论(0) 推荐(0) 编辑
摘要: 一,collect是一个终端操作,它接收的参数是将流中的元素累积到汇总结果的各种方式(称为收集器) 二,预定义收集器包括将流元素归约和汇总到一个值.如下 工厂方法 返回类型 用于 toList List<T> 把流中所有元素收集到List中 示例:List<Menu> menus=Menu.getM 阅读全文
posted @ 2018-01-24 10:06 疯码牛Pro 阅读(407) 评论(0) 推荐(0) 编辑
摘要: influxdb典型的时序数据库,应运场景主要是信息采集后的信息存储,主要是信息采集和信息展示之间的存储阶段,采集阶段可以是多种途径,各种metric的叠加,展示阶段主要集中在grafna上面 #注释如下: 另:修改和删除的方法; 阅读全文
posted @ 2018-01-23 21:02 疯码牛Pro 阅读(161) 评论(0) 推荐(0) 编辑
摘要: 1 搜狗输入法错误: 删除home路径下的 .config/SouGouP...整个文件夹并重启2 ubantu系统更新:sudo apt-get update 获取最近更新的软件包列表 sudo apt-get dist-upgrade 进行系统和软件更新 设置开机自启: sudo cp /usr 阅读全文
posted @ 2018-01-23 20:53 疯码牛Pro 阅读(304) 评论(0) 推荐(0) 编辑
摘要: 创建topic bin/kafka-topics.sh --create --zookeeper 192.168.1.81:2181 --replication-factor 3 -partitions 10 --topic RecordPreprocessingTest1 ##控制台发送消息 bi 阅读全文
posted @ 2017-08-24 15:41 疯码牛Pro 阅读(495) 评论(0) 推荐(0) 编辑
摘要: 常见命令: git checkout -b develop master 创建Develop分支的命令 git checkout master 切换到Master分支 git merge --no-ff develop对Develop分支进行合并 git branch 查看本地所有分支 git st 阅读全文
posted @ 2017-08-15 00:04 疯码牛Pro 阅读(672) 评论(0) 推荐(0) 编辑
摘要: 代码功能:对kafka等工具输出的json流文件进行解析 实现工具:jsonpath jackjson fastjson 代码实现: // 用jsonpath实现如下: 阅读全文
posted @ 2017-08-09 18:09 疯码牛Pro 阅读(342) 评论(0) 推荐(0) 编辑
摘要: 实现功能:针对读取的CSV文档字符串进行Map格式输出 主要代码如下: 阅读全文
posted @ 2017-08-09 18:02 疯码牛Pro 阅读(571) 评论(0) 推荐(0) 编辑