摘要:
文章转载自:https://help.aliyun.com/knowledge_detail/41334.html 本文主要介绍如下几点内容,您可以根据实际需要选择。 "查看和修改Linux实例内核参数" "Linux网络相关内核参数引发的常见问题及处理" "文档涉及的Linux内核参数说明" 查看 阅读全文
摘要:
文章转载自:https://blog.csdn.net/UbuntuTouch/article/details/106185321 总结: 1.elastic 免费版只有发送警报到一个索引或者到Server log里去,使用邮件报警的话需要白金版的 2.暂时还没有发送警报到微信,钉钉的功能 阅读全文
摘要:
官方文档地址: https://www.elastic.co/guide/en/beats/filebeat/7.3/elasticsearch output.html https://www.elastic.co/guide/en/beats/filebeat/7.3/defining proce 阅读全文
摘要:
# 获取图片 location /group[1-9]/M0[0-9] { root /home/vdc1/fastdfs_storage/data; ngx_fastdfs_module; } # 防盗链 location ~* \.(gif|jpg|png|jpeg)$ { expires 30 阅读全文
摘要:
文章转载自: https://mp.weixin.qq.com/s?__biz=MzI2NDY1MTA3OQ==&mid=2247484242&idx=1&sn=8215077417867e3eb6311665589f569c&chksm=eaa82b7adddfa26c97a7c417f0d8cc 阅读全文
摘要:
文章转载自: https://mp.weixin.qq.com/s?__biz=MzI2NDY1MTA3OQ==&mid=2247484113&idx=1&sn=6c40d7f5d68840af1ea9a1fd38249dbd&chksm=eaa82af9dddfa3efead2861f681b38 阅读全文
摘要:
文章转载自: https://mp.weixin.qq.com/s?__biz=MzI2NDY1MTA3OQ==&mid=2247484171&idx=1&sn=985a71a4f2fff5233b1803fa6e8bb9db&chksm=eaa82b23dddfa23576681118838761 阅读全文
摘要:
文章转载自: https://mp.weixin.qq.com/s?__biz=MzI2NDY1MTA3OQ==&mid=2247484134&idx=1&sn=750249a97c42b2ba22ba6755c79acb10&chksm=eaa82acedddfa3d822a4d3bbfb6dc7 阅读全文
摘要:
文章转载自: https://mp.weixin.qq.com/s?__biz=MzI2NDY1MTA3OQ==&mid=2247483918&idx=1&sn=a9f2ad3c4549021e20fefafe6baa14ff&chksm=eaa82a26dddfa330eb53d6b997fe98 阅读全文
摘要:
文章转载自: https://mp.weixin.qq.com/s?__biz=MzI2NDY1MTA3OQ==&mid=2247483914&idx=1&sn=436f81480c2a15af6345183f8eebf16e&chksm=eaa82a22dddfa334c95c3f4bd227c9 阅读全文
摘要:
文章转载自: https://mp.weixin.qq.com/s?__biz=MzI2NDY1MTA3OQ==&mid=2247484125&idx=1&sn=18274d67735893018b83108abe66f787&chksm=eaa82af5dddfa3e3bbb525454746b8 阅读全文
摘要:
文章转载自: https://mp.weixin.qq.com/s?__biz=MzI2NDY1MTA3OQ==&mid=2247483905&idx=1&sn=acaff63b10e0ad48ad32517950ace5cf&chksm=eaa82a29dddfa33f2a9c6046b5244b 阅读全文
摘要:
文章转载自: https://mp.weixin.qq.com/s?__biz=MzI2NDY1MTA3OQ==&mid=2247484372&idx=1&sn=e863e46b95226eef27845ac462dfa428&chksm=eaa82bfcdddfa2eaeb5a1ba5326449 阅读全文
摘要:
文章转载自: https://mp.weixin.qq.com/s?__biz=MzI2NDY1MTA3OQ==&mid=2247484441&idx=1&sn=8292f50bedec05d040c309d50520a3b9&chksm=eaa82c31dddfa5275eada1884ecf60 阅读全文
摘要:
文章转载自: https://mp.weixin.qq.com/s?__biz=MzI2NDY1MTA3OQ==&mid=2247484022&idx=1&sn=7a4de21570820b82df0170b3c769b169&chksm=eaa82a5edddfa348b3e300ac4bc611 阅读全文
摘要:
文章转载自: https://mp.weixin.qq.com/s?__biz=MzI2NDY1MTA3OQ==&mid=2247484130&idx=1&sn=454f1994eb9434687f787f00533d414d&chksm=eaa82acadddfa3dcef7c1cf3966db4 阅读全文
摘要:
文章转载自: https://mp.weixin.qq.com/s?__biz=MzI2NDY1MTA3OQ==&mid=2247484159&idx=1&sn=731562a8bb89c9c81b4fd6a8e92e1a99&chksm=eaa82ad7dddfa3c11e5b63a41b0e8b 阅读全文
摘要:
文章转载自: https://mp.weixin.qq.com/s?__biz=MzI2NDY1MTA3OQ==&mid=2247484473&idx=1&sn=1b3b07b9893f36e32ba20845f906e04a&chksm=eaa82c11dddfa50788e996fa50d2dc 阅读全文
摘要:
文章转载自: https://mp.weixin.qq.com/s?__biz=MzI2NDY1MTA3OQ==&mid=2247484584&idx=1&sn=accfb65830255f00c28ac1571725e493&chksm=eaa82c80dddfa596bef19161d713fe 阅读全文
摘要:
文章转载自: https://mp.weixin.qq.com/s?__biz=MzI2NDY1MTA3OQ==&mid=2247484454&idx=1&sn=43e95a27bd8635b73d78a23db79407fe&chksm=eaa82c0edddfa518e979b4b4fe5f6b 阅读全文
摘要:
文章转载自: https://blog.csdn.net/laoyang360/article/details/51747266 引言: elasticsearch 的出现使得我们的存储、检索数据更快捷、方便。但很多情况下,我们的需求是:现在的数据存储在mysql、oracle等关系型传统数据库中, 阅读全文
摘要:
文章转载自: https://www.cnblogs.com/dalaoyang/p/11018541.html 1.go mysql elasticsearch简介 go mysql elasticsearch是一个将MySQL数据自动同步到Elasticsearch的服务。 它首先使用mysql 阅读全文
摘要:
文章转载自: https://mp.weixin.qq.com/s?__biz=MzI2NDY1MTA3OQ==&mid=2247484411&idx=1&sn=1f5a371095d61bd0d6461ed111dd252b&chksm=eaa82bd3dddfa2c5b08831bfd42211 阅读全文
摘要:
文章转载自: https://mp.weixin.qq.com/s?__biz=MzI2NDY1MTA3OQ==&mid=2247484377&idx=1&sn=199bc88f700f427f4515afac4c7402f1&chksm=eaa82bf1dddfa2e7c9f4319b52fc7a 阅读全文
摘要:
文章转载自: https://mp.weixin.qq.com/s?__biz=MzI2NDY1MTA3OQ==&mid=2247484358&idx=1&sn=3a783479bb6a1852589f4c4cf3c5d310&chksm=eaa82beedddfa2f822db1492e5f82f 阅读全文
摘要:
1、问题 源自星球同学的提问:es如何与hive或mysql结合使用?es不支持事务有什么好的弥补方案吗? 2、事务的核心概念 如果一个数据库声称支持事务的操作,那么该数据库必须要具备以下ACID四个特性: 原子性(Atomicity) 原子性是指事务包含的所有操作要么全部成功,要么全部失败回滚, 阅读全文
摘要:
1、什么是堆内存? Java 中的堆是 JVM 所管理的最大的一块内存空间,主要用于存放各种类的实例对象。 在 Java 中,堆被划分成两个不同的区域: 新生代 ( Young )、 老年代 ( Old )。 新生代 ( Young ) 又被划分为三个区域 Eden、 From Survivor、 阅读全文
摘要:
1. ignore_above的作用 ES中用于设置超过设定字符后,不被索引或者存储。 2. 当字符超过给定长度后,能否存入 keyword类型的最大支持的长度为——32766个UTF 8类型的字符。 也就是说term精确匹配的最大支持的长度为32766个UTF 8个字符。 3. text类型和ke 阅读全文
摘要:
1) 我应该有多少个分片? 答: 每个节点的分片数量保持在低于每1GB堆内存对应集群的分片在20 25之间。 因此,具有30GB堆内存的节点最多可以有600 750个分片,但是进一步低于此限制,您可以保持更好。 2) 我的分片应该有多大? 答:分片大小为50GB通常被界定为适用于各种用例的限制。 阅读全文
摘要:
1.了解ES集群拓扑结构 当我们启动Elasticsearch的实例,就会启动至少一个节点。相同集群名的多个节点的连接组成一个集群, 在默认情况下,集群中的每个节点都可以处理Http请求和集群节点的数据传输。 集群中的所有的节点都知道集群中其他所有的节点,可以将客户端请求转发到适当的节点。 默认情况 阅读全文
摘要:
1. MySQL 中的数据库(DataBase),等价于 ES 中的索引(Index)。 2. MySQL 中一个数据库下面有 N 张表(Table),等价于1个索引 Index 下面有 N 多类型(Type)。 3. MySQL 中一个数据库表(Table)下的数据由多行(Row)多列(colum 阅读全文
摘要:
Logstash: 启动监控 配置文件:logstash.yml Logstash: 集中管理 意思是说服务器这边只是启动logstash,并没有执行任何配置文件,而是在集中管理这边设置配置参数信息等 角色权限: 用户权限: 在logstash.yml文件里做相应的配置: 直接启动logstash, 阅读全文
摘要:
使用情况说明: 已经使用logstash拉取MySQL数据存储到es中,es中也创建了相应的索引,也存储了数据。假若把这个索引给删除了,再次进行同步操作的话要咋做,从最开始的数据进行同步,而不是新增的数据 官方文档地址:https://www.elastic.co/guide/en/logstash 阅读全文
摘要:
MySQL中数据样式 ES中数据样式 注意:若@timestamp不想使用数据表中的时间字段值,则可以使用系统时间值,但是要使用东八区的系统时间,不是UTC时间 阅读全文
摘要:
logstash和elasticsearch是按照UTC时间的,kibana却是按照正常你所在的时区显示的,是因为kibana中可以配置时区信息。 具体看这个: logstash 的配置文件添加 这样output 输出的时间才是正确的,前提服务器时区已经修改了 阅读全文
摘要:
官方文档地址:https://www.elastic.co/guide/en/logstash/current/plugins inputs jdbc.html plugins inputs jdbc jdbc_driver_library 配置多个SQL语句编辑 当需要从不同的数据库表或视图中查询 阅读全文
摘要:
针对单独一个数据表而言,大致可以分如下两种情况: 1.该数据表中有一个根据当前时间戳更新的字段,此时监控的是这个时间戳字段 具体可以看这个文章:https://www.cnblogs.com/sanduzxcvbnm/p/12858967.html 示例: modification_time就是表中 阅读全文
摘要:
| Setting | Input type | Required | | | | | | " " | "boolean" | No | | " " | "hash" | No | | " " | "number" | No | | " " | "number" | No | | " " | "st 阅读全文
摘要:
参考样式即可,具体使用配置参数根据实际情况而定 阅读全文
摘要:
注意:这个演示也是读取数据库中的某个数据表的数据,并不是整个数据库中的所有表的数据 注意:@timestamp时间戳是utc时间,若想换成东八区时间,需要新增其他设置,具体看如下示例 系统配置 MySQL:5.5.53 Elasticsearch:7.5.0 Logstash:7.5.0 Java: 阅读全文