摘要: Windows服务 连接与断开服务器 数据库操作 表的操作 数据操作 字符集编码 数据类型(列类型) 选择类型 列属性(列约束) 建表规范 SELECT UNION 子查询 连接查询(join) 导出 INSERT DELETE TRUNCATE 备份与还原 视图 事务(transaction) 锁 阅读全文
posted @ 2019-03-27 10:32 路飞撸代码 阅读(235) 评论(0) 推荐(0) 编辑
摘要: MySQL简介 1、什么是数据库 ? 数据库(Database)是按照数据结构来组织、存储和管理数据的仓库,它产生于距今六十多年前,随着信息技术和市场的发展,特别是二十世纪九十年代以后,数据管理不再仅仅是存储和管理数据,而转变成用户所需要的各种数据管理的方式。数据库有很多种类型,从最简单的存储有各种 阅读全文
posted @ 2019-03-20 18:08 路飞撸代码 阅读(250) 评论(0) 推荐(0) 编辑
摘要: a) JVM内存设置不要超过机器的一半内存,并且不超过32G。(./bin/elasticsearch -Xmx10g -Xms10g或者修改./bin/elasticsearch.in.sh文件: ** 一般分配主机1/4-1/2的内存** 设置每个线程的堆栈大小, ES单线程承载的数据量比较大 阅读全文
posted @ 2019-03-20 10:20 路飞撸代码 阅读(267) 评论(0) 推荐(0) 编辑
摘要: 大家可能会遇到索引数据比较慢的过程。其实明白索引的原理就可以有针对性的进行优化。ES索引的过程到相对Lucene的索引过程多了分布式数据的扩展,而这ES主要是用tranlog进行各节点之间的数据平衡。所以从上我可以通过索引的settings进行第一优化: "index.translog.flush_ 阅读全文
posted @ 2019-03-20 10:19 路飞撸代码 阅读(251) 评论(0) 推荐(0) 编辑
摘要: 以下分别解读几个我知道的内存消耗大户: Segment Memory Segment不是file吗?segment memory又是什么?前面提到过,一个segment是一个完备的lucene倒排索引,而倒排索引是通过词典(Term Dictionary)到文档列表(Postings List)的映 阅读全文
posted @ 2019-03-20 10:18 路飞撸代码 阅读(903) 评论(0) 推荐(0) 编辑
摘要: 硬盘对集群非常重要,特别是建索引多的情况。磁盘是一个服务器最慢的系统,对于写比较重的集群,磁盘很容易成为集群的瓶颈。 如果可以承担的器SSD盘,最好使用SSD盘。如果使用SSD,最好调整I/O调度算法。RAID0是加快速度的不错方法。 ES建议机器配置:64G内存 SSD硬盘 RAID0,不要使用N 阅读全文
posted @ 2019-03-20 10:18 路飞撸代码 阅读(583) 评论(0) 推荐(0) 编辑
摘要: heap参数设置优化 命令行修改 ./bin/elasticsearch -Xmx10g -Xms10g xmx-JVM最大允许分配的堆内存,按需分配 xms-JVM初始分配的堆内存 此值设置与-Xmx相同,以避免每次垃圾回收完成后JVM重新分配内存。 对Unix系统,可修改./bin/elasti 阅读全文
posted @ 2019-03-20 10:17 路飞撸代码 阅读(707) 评论(0) 推荐(0) 编辑
摘要: 预留一半内存给Lucene使用 一个常见的问题是配置堆太大。你有一个64 GB的机器,觉得JVM内存越大越好,想给Elasticsearch所有64 GB的内存。 当然,内存对于Elasticsearch来说绝对是重要的,用于更多的内存数据提供更快的操作。而且还有一个内存消耗大户-Lucene Lu 阅读全文
posted @ 2019-03-20 10:16 路飞撸代码 阅读(423) 评论(0) 推荐(0) 编辑
摘要: 节点职责单一,各司其职 elasticSearch的配置文件中有2个参数:node.master和node.data。这两个参 数搭配使用时,能够帮助提供服务器性能。 数据节点node.master: false node.data: true 该node服务器只作为一个数据节点,只用于存储索引数据 阅读全文
posted @ 2019-03-20 10:15 路飞撸代码 阅读(664) 评论(0) 推荐(0) 编辑
摘要: 此处我们是修改为60s 其实可以改为-1s 这样就是不刷新,我们需要在查询的时候进行一次索引刷新然后再查询,这个嘛就得看你们用户能容忍多少时间长度了。 es最近老是挂掉,无缘无故,表现症状为 对于大小超过100g的index(5个分片 1e数据量左右)插入超级慢,由于机器资源有限 ,只能想出 将每一 阅读全文
posted @ 2019-03-20 10:02 路飞撸代码 阅读(667) 评论(0) 推荐(0) 编辑