Elasticsearch安装
Elasticsearch安装
1.ElasticSearch
Elasticsearch,基于lucene,隐藏复杂性,提供简单易用的restful api接口、java api接口(还有其他语言的api接口)。
关于elasticsearch的一个传说,有一个程序员失业了,陪着自己老婆去英国伦敦学习厨师课程。程序员在失业期间想给老婆写一个菜谱搜索引擎,觉得lucene实在太复杂了,就开发了一个封装了lucene的开源项目,compass。后来程序员找到了工作,是做分布式的高性能项目的,觉得compass不够,就写了elasticsearch,让lucene变成分布式的系统。
Elasticsearch是一个实时分布式搜索和分析引擎。它用于全文搜索、结构化搜索、分析。
全文检索:将非结构化数据中的一部分信息提取出来,重新组织,使其变得有一定结构,然后对此有一定结构的数据进行搜索,从而达到搜索相对较快的目的。
结构化检索:我想搜索商品分类为日化用品的商品都有哪些,select * from products where category_id='日化用品'。
数据分析:电商网站,最近7天牙膏这种商品销量排名前10的商家有哪些;新闻网站,最近1个月访问量排名前3的新闻版块是哪些。
1.1 安装包下载
1)Elasticsearch官网: https://www.elastic.co/products/elasticsearch
1.2 安装Elasticsearch(单节点Linux环境)
1)解压elasticsearch-5.6.1.tar.gz到/opt/module目录下
[root@master software]# tar -zxvf elasticsearch-5.6.1.tar.gz -C /opt/module/
2)在/opt/module/elasticsearch-5.6.1路径下创建data和logs文件夹
[root@master elasticsearch-5.6.1]# mkdir data
[root@master elasticsearch-5.6.1]# mkdir logs
3)修改配置文件/opt/module/elasticsearch-5.2.2/config/elasticsearch.yml
[root@master config]# pwd
/opt/module/elasticsearch-5.6.1/config
[root@master config]# vi elasticsearch.yml
# ---------------------------------- Cluster ------------------------------------- cluster.name: es-cluster # ------------------------------------ Node -------------------------------------- node.name: node1 # ----------------------------------- Paths --------------------------------------- path.data: /opt/module/elasticsearch-5.6.1/data path.logs: /opt/module/elasticsearch-5.6.1/logs # ----------------------------------- Memory ----------------------------------- bootstrap.memory_lock: false bootstrap.system_call_filter: false # ---------------------------------- Network ------------------------------------ network.host: 192.168.96.11 # --------------------------------- Discovery ------------------------------------ discovery.zen.ping.unicast.hosts: ["master"]
http.cors.enabled: true |
(1)cluster.name
如果要配置集群需要两个节点上的elasticsearch配置的cluster.name相同,都启动可以自动组成集群,这里如果不改cluster.name则默认是cluster.name=es-cluster,
(2)nodename随意取但是集群内的各节点不能相同
(3)修改后的每行前面不能有空格,修改后的“:”后面必须有一个空格
4)配置linux系统环境
(1)编辑limits.conf 添加类似如下内容
[root@master elasticsearch-5.6.1]# vi /etc/security/limits.conf
添加如下内容:
* soft nofile 65536
* hard nofile 131072
* soft nproc 4096
* hard nproc 4096
(2)进入limits.d目录下修改配置文件。
[root@master elasticsearch-5.6.1]# vi /etc/security/limits.d/20-nproc.conf
修改如下内容:
* soft nproc 1024
#修改为
* soft nproc 4096
(3)修改配置sysctl.conf
[root@master elasticsearch-5.6.1]# vi /etc/sysctl.conf
添加下面配置:
vm.max_map_count=655360
并执行命令:
[root@master elasticsearch-5.6.1]# sysctl -p
然后,重新启动elasticsearch,即可启动成功。
5)Linux中新建用户
(1)使用root用户操作如下命令:
useradd elsearch -----------创建用户
passwd elsearch -----------为用户设置密码
vim /etc/sudoers -----------为用户赋予sudo权限
添加 elsearch ALL=(ALL) ALL
(2) 修改文件夹及其子文件夹属主命令
chown -R elsearch:elsearch elasticsearch-6.1.1/
修改后即可以使用elsearch操作此文件夹内容
6)启动elasticsearch
[elsearch@master elasticsearch-5.6.1]$ bin/elasticsearch
7)测试elasticsearch
[elsearch@master elasticsearch-5.6.1]$ curl http://master:9200 curl -XGET 'localhost:9200/_cat/health?v&pretty'
{ |
8)安装elasticsearch-head.crx插件
第一种安装方法:
(1)Google浏览器:打开浏览器,进入“更多工具”——>“扩展程序”,将插件拖入即可完成安装
(2)360浏览器:打开浏览器,双击elasticsearch-head.crx插件即可完成安装
(3)使用插件查看节点状态
第二种安装方法:
下载插件:https://github.com/mobz/elasticsearch-head
nodejs官网下载安装包:https://nodejs.org/dist/
node-v6.9.2-linux-x64.tar.xz
拷贝
安装nodejs:
解压
配置环境变量:
export NODE_HOME=/usr/local/node-v6.9.2-linux-x64 export PATH=$PATH:$NODE_HOME/bin
查看node和npm版本:
node -v
npm -v
解压head插件到/opt/module目录下:
unzip elasticsearch-head-master.zip
查看当前head插件目录下有无node_modules/grunt目录:
没有:执行命令创建:npm install grunt --save --registry=https://registry.npm.taobao.org
安装head插件:
npm install -g cnpm --registry=https://registry.npm.taobao.org
安装grunt:
npm install -g grunt-cli --registry=https://registry.npm.taobao.org
编辑Gruntfile.js
vim Gruntfile.js
文件93行添加
hostname:'0.0.0.0'
检查head根目录下是否存在base文件夹
没有:将 _site下的base文件夹及其内容复制到head根目录下
mkdir base
cp base/* ../base/
启动grunt server:
grunt server -d
如果提示grunt的模块没有安装:
Local Npm module “grunt-contrib-clean” not found. Is it installed?
Local Npm module “grunt-contrib-concat” not found. Is it installed?
Local Npm module “grunt-contrib-watch” not found. Is it installed?
Local Npm module “grunt-contrib-connect” not found. Is it installed?
Local Npm module “grunt-contrib-copy” not found. Is it installed?
Local Npm module “grunt-contrib-jasmine” not found. Is it installed?
执行以下命令:
npm install grunt-contrib-clean -registry=https://registry.npm.taobao.org
npm install grunt-contrib-concat -registry=https://registry.npm.taobao.org
npm install grunt-contrib-watch -registry=https://registry.npm.taobao.org
npm install grunt-contrib-connect -registry=https://registry.npm.taobao.org
npm install grunt-contrib-copy -registry=https://registry.npm.taobao.org
npm install grunt-contrib-jasmine -registry=https://registry.npm.taobao.org
最后一个模块可能安装不成功,但是不影响使用。
浏览器访问head插件:
9)停止集群
kill -9 进程号
2.3 安装Elasticsearch(多节点集群Linux环境)
1)分发Elasticsearch安装包至slave1和slave2
[elsearch@master module]$ xsync elasticsearch-5.6.1/
2)修改master配置信息
[elsearch@master config]$ vi elasticsearch.yml
添加如下信息:
node.master: true
node.data: true
3)修改slave1配置信息
(1)修改Elasticsearch配置信息
[elsearch@master config]$ vi elasticsearch.yml
node.name: node2
node.master: false
node.data: true
network.host: 192.168.96.12
(2)修改Linux相关配置信息(同master)
4)修改slave2配置信息
(1)修改Elasticsearch配置信息
[elsearch@slave1 config]$ vi elasticsearch.yml
node.name: node3
node.master: false
node.data: true
network.host: 192.168.96.13
(2)修改Linux相关配置信息(同master)
5)分别启动三台节点的Elasticsearch
6)使用插件查看集群状态