摘要： spark streaming 不同于sotm，是一种准实时处理系统。storm 中，把批处理看错是时间教程的实时处理。而在spark streaming中，则反过来，把实时处理看作为时间极小的批处理。 1、三个时间参数 spark streaming 中有三个关于时间的参数，分别如下： 窗口时间w 阅读全文

摘要： 目录 1、合理的批次处理时间 2、合理的kafka拉取数据 3、缓存反复使用的Dstream(RDD) 4、其他一些优化策略 5、结果 1、合理的批次处理时间 关于Spark Streaming的批处理时间设置是非常重要的，Spark Streaming在不断接收数据的同时，需要处理数据的时间，所以 阅读全文

摘要： Spark Streaming 是微批处理。 SparkConf sparkConf = new SparkConf().setAppName("SparkStreaming").setMaster("local[*]"); JavaStreamingContext javaStreamingCon 阅读全文

摘要： 一、官网下载地址： https://www.elastic.co/cn/downloads/elasticsearch 二、点击“past releases” ，然后找到对应的版本，点击Download。 三、选择相应的系统版本进行下载。Elasticsearch 6.4.x对应的是lucene的7 阅读全文

摘要： 一、Maven仓库官网： https://mvnrepository.com/ 二、搜索elasticsearch，然后点击Server或者elasticsearch进入。 三、点击相应的版本号进入。 四、查看对应的lucene版本。 END 阅读全文

摘要： 在Solr1.4.x的时候，Solr和Lucene是独立发布的，Solr一般会在Lucene发布新版本后跟进发布一个新的版本。到了3.1的时候，两者代码做了合并，版本号统一了，并同时发布。具体情况如下Solr 1.4.0 Lucene 2.9.1Solr 1.4.1 Lucene 2.9.3Solr 阅读全文

摘要： http://majiameng.com/article/2717.html 阅读全文

摘要： 前言 此前虽然有尝试过集成elasticsearch，不过技术栈并非spring boot。本次尝试在springboot项目中集成elasticsearch，不过由于spring boot、es、rest的版本问题，折腾了好久，写这篇文章的目的一是分享一下，也是为了纪念当时的摸爬滚打。注：集成过程 阅读全文

摘要： https://juejin.cn/post/6844904122731200525 阅读全文

摘要： https://my.oschina.net/ykbj/blog/1859661 阅读全文