02、 Elasticsearch配置实战

部署配置ES，需要配置JDK 环境，JDK(Java Development Kit) 是 Java 语言的软件开发工具包(SDK)），此处采用JDK1.8版本，配置JAVA环境变量，vi /etc/profile加入如下代码

　tar xzf jdk-8u131-linux-x64.tar.gz

　mv jdk1.8.0_131 /usr/local/jdk

　vim /etc/profile

export JAVA_HOME=/usr/local/jdk
export CLASSPATH=$CLASSPATH:$JAVA_HOME/lib:$JAVA_HOME/jre/lib
export PATH=$JAVA_HOME/bin:$JAVA_HOME/jre/bin:$PATH:$HOMR/bin

使环境变量立刻生效，同时查看JAVA版本，显示版本信息，则证明安装成功；

source    /etc/profile      
java    -version

下载Elasticsearch包

wget   https://artifacts.elastic.co/downloads/elasticsearch/elasticsearch-5.3.0.tar.gz 

安装Elasticsearch

tar xzf elasticsearch-5.3.0.tar.gz
mv elasticsearch-5.3.0 /usr/local/elasticsearch/

修改vim /usr/local/elasticsearch/config/elasticsearch.yml文件

设置监听地址为network.hosts：0.0.0.0

 

创建管理用户elk并启动服务

useradd  elk
chown -R  elk:elk  /usr/local/elasticsearch/
/usr/local/elasticsearch/bin/elasticsearch -d

 

报错排查：

启动后可能会报错,需要修改如下内核参数设置：
1）SecComp功能不支持；

ERROR: bootstrap checks failed
system call filters failed to install; check the logs and fix your configuration or disable system call filters at your own risk；
因为Centos6不支持SecComp，而ES5.3.0默认bootstrap.system_call_filter为true进行检测，所以导致检测失败，失败后直接导致ES不能启动。

Seccomp（全称securecomputing mode）是Linux Kernel从2.6.23版本开始所支持的一种安全机制。

在Linux系统里，大量的系统调用（systemcall）直接暴露给用户态程序。但是并不是所有的系统调用都被需要，而且不安全的代码滥用系统调用会对系统造成安全威胁。通过Seccomp，我们限制程序使用某些系统调用，这样可以减少系统的暴露面，同时是程序进入一种“安全”的状态。
解决方法：
在elasticsearch.yml中配置bootstrap.system_call_filter为false，注意要在Memory下面:
bootstrap.memory_lock: false
bootstrap.system_call_filter: false

2）内核参数设置问题；

max file descriptors [4096] for elasticsearch process is too low, increase to at least [65536]
max number of threads [1024] for user [hadoop] is too low, increase to at least [2048]
max virtual memory areas vm.max_map_count [65530] is too low, increase to at least [262144]

解决方法：

vim /etc/security/limits.conf 

* soft nofile 65536
* hard nofile 65536

vim /etc/security/limits.d/90-nproc.conf 

soft  nproc  2048

vi /etc/sysctl.conf

vm.max_map_count=655360

Max_map_count文件包含限制一个进程可以拥有的VMA(虚拟内存区域)的数量。虚拟内存区域是一个连续的虚拟地址空间区域。在进程的生命周期中，每当程序尝试在内存中映射文件，链接到共享内存段，或者分配堆空间的时候，这些区域将被创建。

调优这个值将限制进程可拥有VMA的数量。限制一个进程拥有VMA的总数可能导致应用程序出错，因为当进程达到了VMA上线但又只能释放少量的内存给其他的内核进程使用时，操作系统会抛出内存不足的错误。

如果你的操作系统在NORMAL区域仅占用少量的内存，那么调低这个值可以帮助释放内存给内核用。
sysctl -p或者exit退出终端；

如下图：

 

 

至此ES配置完毕，如果想配置ES集群模式，同样也非常简单，只需要拷贝 ES副本集即可，然后修改相应的参数。