Linux上安装elasticsearch

1、ES(elasticsearch)简介
  ES是一个分布式使用RestFul风格的数据搜索引擎,并且ES是构建在Lucene框架之上,也就是说ES也是基于Lucene进行开发的搜索引擎框架。
  ES三大核心:
    Index
      相当于关系型数据库中的库
    Type
      相当于关系型数据库中的表
    Document
      相当于关系型数据库中的表数据
 
2、ES的配置
  ES必须要配置jdk。
  ES不要用最新版,因为ES的最新版必须要求jdk在11版本以上,但是目前市面上所有的公司全部都在jdk8或者以下。
2.1.配置jdk
2.2.从官网中下载ES
2.3.解压es的压缩包
  tar -zxvf es....
2.4.增大linux上部署软件的内存和硬盘
  (以下的配置一定要使用root用户,否则没有权限或者配置不生效)
  vi /etc/security/limits.conf
  配置了某个用户/某些用户对软件的内存和硬盘使用权限
* soft nproc 655350 
* soft nofile 655350 
* hard nproc 655350 
* hard nofile 655350
3.5.最大线程数(ES一般情况是以集群启动,所以目前的用户无法满足ES所要创建的线程,所以需要加大线程数)
  这里只是配置系统可容纳最大的线程数,默认系统都有自动保护,不会开启很大的线程数,需要手动修改
  vi /etc/sysctl.conf
# Controls the default maxmimum size of a mesage queue kernel.msgmnb = 65536 
# Controls the maximum size of a message, in bytes kernel.msgmax = 65536 
# Controls the maximum shared segment size, in bytes kernel.shmmax = 68719476736 
# Controls the maximum number of shared memory segments, in pages kernel.shmall = 4294967296
3.6.配置用户最大的线程数
  vi /etc/secrity/limits.d/90-nproc.conf
  需要把* 1024--->4096
3.7.使修改永久生效
  sysctl -p
3.8.直接启动es
  在安装目录下的bin目录
  ./elasticsearch
  会报错!!!!(不可用root用户启动,详情见下文)
3.9.修改elasticSeach.yml配置文件
# 修改集群名字(名字随便起,没有什么意义)
cluster.name: my-cluster
# 如果是单节点(名字随便起,如果是集群则不能重复)
node.name: node-1
# ES所存放数据的位置(默认data目录不存在,需要自己手动创建)
path.data: /home/apps/elasticsearch-6.4.0/data
# ES的日志存放目录(默认已经存在,直接使用即可,不需要创建)
path.logs: /home/apps/elasticsearch-6.4.0/logs
# 放开ES的内存锁,让ES直接拥有最大内存使用权
bootstrap.memory_lock: false
# centos6中没有CONFIG_SECCOMP_FILTER,但是centos7中有,如果linux系统为centos6则需要关闭过滤
bootstrap.system_call_filter: false
# ES的主机地址(一旦配置的是0,就是代表所有的电脑都可以连接(对连接不再造成任何限制))
network.host: 192.168.23.136(0.0.0.0)
# ES的默认端口号(./elasticsearch -d(启动的是ES的控制台))
http.port: 9200
# 识别其他的集群host(如果为单节点只需要写一个)
discovery.zen.ping.unicast.hosts: ["192.168.23.136","",""]
3.10.启动ES
  进入bin目录
  前台启动(我们关闭命令行或者退出,应用就会关闭) ./elasticsearch
  后台启动,这样当我们退出时,应用仍在后台运行 ./elasticsearch -d
  前台启动,直接ctrl+c退出即可,后台启动,停止时可以直接杀掉进程
3.11.检测是否启动成功
  在浏览器地址栏输入:  ip:端口号
  出现下列代码说明启动成功
{
"name" : "node-1",
"cluster_name" : "my-cluster",
"cluster_uuid" : "UmoHkEZzReGQMrrLShhDIQ",
"version" : {
"number" : "6.4.0",
"build_flavor" : "default",
"build_type" : "tar",
"build_hash" : "595516e",
"build_date" : "2018-08-17T23:18:47.308994Z",
"build_snapshot" : false,
"lucene_version" : "7.4.0",
"minimum_wire_compatibility_version" : "5.6.0",
"minimum_index_compatibility_version" : "5.0.0"
},
"tagline" : "You Know, for Search"
}
配置ES所遇到的问题:
1.ES为了自我保护,不让使用root用户启动,因为root用户权限过大,容易修改ES自己配置
  创建新的用户并且授权
    useradd esuser
    passwd esuser ---> 123456
  授权:
    chown -R esuser /home/apps/elasticsearch
2.因为ES需要消耗非常大的线程数量和内存以及硬盘存储空间
  [1]: max file descriptors [4096] for elasticsearch process is too low, increase to at least [65536]
  [1]:当前启动用户无法对linux系统调动很多的硬盘以及内存存储空间,所以需要自行修改!
  vi /etc/security/limits.conf 在文件后加上 * soft nproc 655350 * soft nofile 655350 * hard nproc 655350 * hard nofile 655350
  [2]: max number of threads [1024] for user [esuser] is too low, increase to at least [4096]
  [2]:当前启动的用户太low了,无法调动很多的线程(默认只能调动1024)
  vi /etc/secrity/limits.d/90-nproc.conf
  [3]: max virtual memory areas vm.max_map_count [65530] is too low, increase to at least [262144]
  [3]:需要配置vi /etc/sysctl.conf文件,加大系统默认的总进程数
最后一行添加:
      vm.max_map_count = 262144
3.使用创建出新用户启动没有问题,但是当使用root用户启动一次后,再使用新创建的用户启动就有问题
  新创建的用户无法使用root用户所创建出的文件
  无论是使用哪一个用户启动都会在config文件夹中创建elasticsearch.keystore文件,root用户权限太大,创建的文件其他用户无法使用,所以会报错!
4.java.lang.UnsupportedOperationException: seccomp unavailable: CONFIG_SECCOMP not compiled into kernel, CONFIG_SECCOMP and CONFIG_SECCOMP_FILTER are needed
  因为最终CONFIG_SECCOMP系统在centos7中默认会被加载,但是在centos6中没有
  需要更换centos的版本6---->7,或者修改es的配置文件,在yml配置文件中添加一行数据
vim /home/apps/elasticsearch-6.4.0/config/elasticsearch.yml
      bootstrap.system_call_filter: false
 
posted @ 2019-09-17 14:33  夜阑风雪  阅读(541)  评论(0编辑  收藏  举报