elasticsearch集群部署、配置

系统：CentOS7

前提：安装好JDK

ES与JDK对应表，截止日期：2022-01-12

 一、安装ES

1、下载或者上传安装包

        elasticsearch-7.15.2-linux-x86_64.tar.gz

2、解压安装包（-C：指定目录）

        tar -zxvf elasticsearch-7.15.2-linux-x86_64.tar.gz -C /opt

3、创建普通用户

        因为安全问题，Elasticsearch 不允许root用户直接运行，所以要创建新用户，在root用户中创建新用户，执行如下命令：

        useradd elasticsearch #新增elasticsearch用户

        passwd elasticsearch #为elasticsearch用户设置密码

4、为新用户授权，否则无法运行es

        cd /opt/

        chown -R elasticsearch:elasticsearch elasticsearch-7.15.2

5、修改elasticsearch.yml文件（root用户改也可以）

        vi /opt/elasticsearch-7.15.2/config/elasticsearch.yml

内容：

        cluster.name: fb-es-cluster #配置elasticsearch的集群名称

        node.name: node-1 #节点名

        network.host: 0.0.0.0 #设置为0.0.0.0允许外网访问

        http.port: 9200 #http访问端口

        cluster.initial_master_nodes: ["node-1"] #初始化新的集群时需要此配置来选举master

        #如果是CentOS 6版本 加入以下两行

        bootstrap.memory_lock: false

        bootstrap.system_call_filter: false

6、修改其他配置文件

        新创建的elasticsearch用户最大可创建文件数太小，最大虚拟内存太小，切换到root用户，编辑下列配置文件，添加类似如下内容

        #切换到root用户

        su root

        #1.===最大可创建文件数太小======

        vi /etc/security/limits.conf

        #在文件末尾中增加下面内容

        elasticsearch soft nofile 65536

        elasticsearch hard nofile 65536

        vi /etc/security/limits.d/90-nproc.conf （这里有可能是20-nproc.conf）

        #在文件末尾中增加下面内容

        elasticsearch soft nofile 65536

        elasticsearch hard nofile 65536

        * hard nproc 4096

#注:*代表Linux所有用户名称

#2.===系统内核配置====

        vi /etc/sysctl.conf

#在文件中增加下面内容

        vm.max_map_count=655360

#重新加载，输入下面命令:

        sysctl -p

解释：max_map_count文件包含限制一个进程可以拥有的VMA(虚拟内存区域)的数量。虚拟内存区域是一个连续的虚拟地址空间区域。在进程的生命周期中，每当程序尝试在内存中映射文件，链接到共享内存段，或者分配堆空间的时候，这些区域将被创建。当进程达到了VMA上线但又只能释放少量的内存给其他的内核进程使用时，操作系统会抛出内存不足的错误。

#3.===最大虚拟内存太小====

        vi jvm.options

        -Xms512m  #elasticsearch启动时jvm所分配的初始堆内存大小

        -Xmx512m  #elasticsearch启动之后允许jvm分配的最大堆内存大小，生产环境中可能需要调大

注意： 1、-Xms512m前面不能有空格，否则会报错

        2、值不能带数点

        3、如果内存足够大，可以不用修改，默认为1G，最好不要超过内存的50%

7、启动elasticsearch

        su elasticsearch #切换到elasticsearch用户启动

        cd /opt/elasticsearch-7.4.0/bin

        ./elasticsearch -d #启动 （加了-d是后台启动，将看不到启动时的日志）

8、访问elasticsearch

        http://xxx.xxx.xxx.xxx:9200

        注：在访问elasticsearch前，请确保防火墙是关闭的，或者对外开放9200端口

一、开放端口：（重启防火墙生效：systemctl restart firewalld.service）

        firewall-cmd --zone=public --add-port=9200/tcp --permanent

查看已经开放的端口（防火墙开启的情况下）：

        firewall-cmd --list-ports

（ ***注意 9300端口也要开放 ***）

二、关防火墙执行命令:（不见意）

        #暂时关闭防火墙

        systemctl stop firewalld

        #或者

        #永久设置防火墙状态

        systemctl enable firewalld.service #打开防火墙永久性生效，重启后不会复原

        systemctl disable firewalld.service #关闭防火墙，永久性生效，重启后不会复原

        #以上命令关闭防火墙不管用试试下面这行

        service iptables stop

二、部署集群

        主节点：192.168.2.56

        数据节点：192.168.2.57、192.168.2.58

步骤：

        1、拷贝副本（或者重新解压安装另外两个节点）

        2、修改elasticsearch.yml配置文件（3台机器都执行）

        2.1 创建日志目录

        cd /opt

        mkdir logs

        mkdir data

        #授权给elasticsearch用户

        chown -R elasticsearch:elasticsearch ./logs

        chown -R elasticsearch:elasticsearch ./data

        2.2 修改3个节点的elasticsearch.yml配置

        节点：192.168.2.56

        ## 集群名称，保证唯一

        cluster.name: fb-es-cluster

        #### 节点名称，必须不一样

        node.name: node-1

        #是不是有资格成为主节点 （配置文件里没有，加上）

        node.master: true

        #是否存储数据 （配置文件里没有，加上）

        node.data: true

        #最大集群节点数 （配置文件里没有，加上）

        node.max_local_storage_nodes: 3

        #ip地址.

        network.host: 0.0.0.0

        #端口

        http.port: 9200

        #内部节点之间沟通端口 （9700端口也要和9200一样对外放开）

        transport.tcp.port: 9700

        #es7.x 之后新增的配置，节点发现

        discovery.seed_hosts: （是本机的话不填IP，填localhost）["192.168.2.56:9700","192.168.2.57:9700","192.168.2.58:9700"]

        #es7.x 之后新增的配置，初始化一个新的集群时需要次配置来选举master

        cluster.initial_master_nodes: ["node-1","node-2","node-3"]

        #数据和存储路径

        path.data: /opt/data

        path.logs: /opt/logs

        #如果是CentOS 6版本 加入以下两行

        bootstrap.memory_lock: false

        bootstrap.system_call_filter: false

        节点：192.168.2.57

        和2.56节点的节点名称、IP不一样，其它的都一样

        节点：192.168.2.57

        和2.56节点的节点名称、IP不一样，其它的都一样

2.3 设置ES的JVM占用内存参数

        vi /opt/elasticsearch-7.15.2/config/jvm.options

        默认情况下，ES启动JVM最小内存1G，最大内存1G

        -Xms256m -Xmx256m

2.4 启动3个节点

        ./elasticsearch -d

2.5 查看集群状态

        http://192.168.2.56:9200/_cat/health?v

结果：

 

返回的node.total是3，代表集群搭建成功