[大数据]ELK环境搭建之一ElasticSearch环境安装

一、ElasticSearch安装包下载

1、由于ElasticSearch更新太快，我们选择了相对稳定，同时也比较新的版本，版本号为7.10.2，特别提配的是，在后面安装的所有ELK相关的包，版本必须保持一至，否则可能会出现莫名其妙的错误，ElasticSearch下载地址：
https://www.elastic.co/cn/downloads/elasticsearch
下载的包为：elasticsearch-7.10.2-linux-x86_64.tar.gz

二、ElasticSearch集群安装

1、准备三台centos服务器，操作系统版本号为centos7.7，我们购买的是华为服务器，分别为 192.168.1.11 、192.168.1.12、192.168.1.13（为了安全，Ip就随便写的，根据自己的服务器修改即可）
2、将elasticsearch-7.10.2-linux-x86_64.tar.gz上传到到服务器的/data目录（我们的数据盘挂在/data之上的，因为操作系的系统盘只有40G，所以所有安装文件、及数据、日志等数据全存放在/data数据盘上，这也是我也没有选择rpm、yum安装的方式）
3、设置服务器的hostname

hostnamectl set-hostname server12
hostnamectl set-hostname server13
hostnamectl set-hostname server14

3、配置服务器hosts（一个服务器取了两个hostname，server一般用着服务器自己看起，node主要是方便ElasticSearch看起来方便通顺，这个随意）

vi /etc/hosts

插入如

192.168.1.11 server12 node-1
192.168.1.12 server13 node-2
192.168.1.13 server14 node-3

4、解压安装包，压缩包入在/data目录下

tar xvf elasticsearch-7.10.2-linux-x86_64.tar.gz
cd /data/elasticsearch-7.10.2
mkdir data
cd /data/elasticsearch-7.10.2/config/
vi jvm.options

修改jvm参数，最大可以设置32G，根据自己服务器情况修改

-Xms16g
-Xmx16g

配置ElasticSearch配置参数

vi elasticsearch.yml

node-1配置如下

cluster.name: my-cluster
node.name: node-1
path.data: /data/elasticsearch-7.10.2/data
path.logs: /data/elasticsearch-7.10.2/logs
network.host: 0.0.0.0
http.port: 9200
discovery.seed_hosts: ["node-1", "node-2","node-3"]
cluster.initial_master_nodes: ["node-1", "node-2","node-3"]
http.cors.enabled: true
http.cors.allow-origin: "*"
http.cors.allow-headers: Authorization

node-2配置如下

cluster.name: my-cluster
node.name: node-2
path.data: /data/elasticsearch-7.10.2/data
path.logs: /data/elasticsearch-7.10.2/logs
network.host: 0.0.0.0
http.port: 9200
discovery.seed_hosts: ["node-1", "node-2","node-3"]
cluster.initial_master_nodes: ["node-1", "node-2","node-3"]
http.cors.enabled: true
http.cors.allow-origin: "*"
http.cors.allow-headers: Authorization

node-3配置如下

cluster.name: my-cluster
node.name: node-3
path.data: /data/elasticsearch-7.10.2/data
path.logs: /data/elasticsearch-7.10.2/logs
network.host: 0.0.0.0
http.port: 9200
discovery.seed_hosts: ["node-1", "node-2","node-3"]
cluster.initial_master_nodes: ["node-1", "node-2","node-3"]
http.cors.enabled: true
http.cors.allow-origin: "*"
http.cors.allow-headers: Authorization

特别说明（很多初次安装elasticsearch都容易遇到的问题）：
network.host：0.0.0.0表过所有请求机子均可以访问，如果是本机localhost，表示只有本机可以访问
下面三行，表示请求时可以跨域访问，尤其是后面需要装的kabana
http.cors.enabled: true
http.cors.allow-origin: “*”
http.cors.allow-headers: Authorization

5、创建es用户

useradd es
cd /data
chown -R es:es elasticsearch-7.10.2

6、系统修改

vim /etc/security/limits.conf

插入

* soft nofile 65535
* hard nofile 65535

修改最大文件数

vim /etc/sysctl.conf
vm.max_map_count=655360

保存执行

sysctl -p

7、启动，进入到bin目录，执行./elasticsearch表时前台运行，如果要后台运行，执行./elasticsearch -d命令

su - es
./elasticsearch

新建启动脚本，时间长了，会忘记命令，进入到bin目录

vi mystart.sh

/data/elasticsearch-7.10.2/bin/elasticsearch  -d
tail -f /data/elasticsearch-7.10.2/logs/slhx-cluster.log

执行脚本启动

sh mystart.sh

8、验证集群是否可用，因为使用的华为服务器，记得在安全组中开通9200端口，便以可以通过华为服务器的外网地址url地址访问
http://你的ip:9200/_cluster/health?pretty

{
  "cluster_name" : "my-cluster",
  "status" : "green",
  "timed_out" : false,
  "number_of_nodes" : 3,
  "number_of_data_nodes" : 3,
  "active_primary_shards" : 19,
  "active_shards" : 38,
  "relocating_shards" : 0,
  "initializing_shards" : 0,
  "unassigned_shards" : 0,
  "delayed_unassigned_shards" : 0,
  "number_of_pending_tasks" : 0,
  "number_of_in_flight_fetch" : 0,
  "task_max_waiting_in_queue_millis" : 0,
  "active_shards_percent_as_number" : 100.0
}

status如果为green，表示集群健康，
number_of_nodes：表示集群节点数
到此结束，ElasticSearch安装完成