Elasticsearch集群安装


目录

                          Elasticsearch集群安装

一.配置搭建三个节点的集群

1.前提条件注意

2.配置集群的配置文件

1.每个节点指定协调器的list(elasticsearch.yml)

2.修改对应配置

3.防止集群发生"脑裂",为集群配置最大的有效master个数

3.启动集群的所有节点

1.类bully(RBULLY)算法将master选举出来(master参加)

2.先启动Head插件观察

3.启动第一个ES

4.启动成功,一直循环读取

5.启动第二个节点

6.启动成功

7.HEAD插件查看

8.启动第三个节点

9.启动成功

10.head查看

11.在进群中连接负载均衡器写入一些数据(index01,index02)


一.配置搭建三个节点的集群

1.前提条件注意

ik分词器(造成其他节点同步数据时,没有ik分词器的错误)保持一致;

如果你将ik分词器删除,保证之前使用ik分词器的所有相关数据(索引)也要删除.

2.配置集群的配置文件

  • 保证集群名称一致elasticsearch
  • 保证节点名称不一致es01 es02 es03

1.每个节点指定协调器的list(elasticsearch.yml)

每一个的名称都要不同

Elasticsearch集群安装

Elasticsearch集群安装

2.修改对应配置

Elasticsearch集群安装

3.防止集群发生"脑裂",为集群配置最大的有效master个数

公式: 所有master个数/2+1(过半数) 3个配置俩个即可

Elasticsearch集群安装

修改一下配置

Elasticsearch集群安装

Elasticsearch集群安装

由于网络波动,形成多个大脑指挥,

  • 在master集群中,本来应该互相有效通信的集群,出现波动后,形成2个多个master集群,同时操作dataNode节点们,可能造成执行的命令冲突导致数据错乱---集群的脑裂;
  • ES防止脑裂的出现,就是利用最小master数量过半定义的.
  • 结论:在ES防止脑裂的配置过半master后,集群无论如何出现脑裂的情况,至多只有一个有效的master集群满足最小master数量;

3.启动集群的所有节点

1.类bully(RBULLY)算法将master选举出来(master参加)

  • 1 启动的master节点到协调器获取集群所有master信息(id)
  • 2 如果activeMaster(正在提供主节点的信息list),有值,说明集群已经选举完毕master.如果有就选举完毕
  • 3 如果activeMaster中没有数据是空(获取断开剔除),没有值(节点信息),将会把从协调器获取的所有master信息放到后补list candidateMaster.
  • 4 判断candidateMaster里面存储的master节点数量是否满足最小master有效数量
  • 5 如果不满足,从新回到第一步
  • 6 如果满足,从里面将id值最小的master选举成为activeMaster的值

最终集群中activeMaster里的节点,就是被选举出来的主节点.

2.先启动Head插件观察

Elasticsearch集群安装

3.启动第一个ES

Elasticsearch集群安装

4.启动成功,一直循环读取

Elasticsearch集群安装

  • 1 启动的master节点到协调器获取集群所有master信息(id) 满足,因为初始设置的为主节点(因为只启动一个,只有一个主节点)
  • 2 如果activeMaster(正在提供主节点的信息list),有值,说明集群已经选举完毕master.如果有就选举完毕 不满足(刚启动,没有选举完毕,)
  • 3 如果activeMaster中没有数据是空(获取断开剔除),没有值(节点信息),将会把从协调器获取的所有master信息放到后补list candidateMaster.  满足  (有且只要一个)
  • 4 判断candidateMaster里面存储的master节点数量是否满足最小master有效数量 不满足(最小maste设置为2,目前只为1)
  • 5 如果不满足,从新回到第一步  不满足(重新获取)  
  • 6 如果满足,从里面将id值最小的master选举成为activeMaster的值  不执行

所以目前,只做一到四的循环读取

5.启动第二个节点

Elasticsearch集群安装

6.启动成功

Elasticsearch集群安装

  • 1 启动的master节点到协调器获取集群所有master信息(id) 满足,因为初始设置的为主节点(启动二个,有二个主节点)
  • 2 如果activeMaster(正在提供主节点的信息list),有值,说明集群已经选举完毕master.如果有就选举完毕 不满足(刚启动,没有选举完毕,)
  • 3 如果activeMaster中没有数据是空(获取断开剔除),没有值(节点信息),将会把从协调器获取的所有master信息放到后补list (防止一次放进多个)candidateMaster.  满足  (有二个)
  • 4 判断candidateMaster里面存储的master节点数量是否满足最小master有效数量 满足(最小maste设置为2)
  • 5 如果不满足,从新回到第一步  满足  
  • 6 如果满足,从里面将id值最小的master选举成为activeMaster的值  满足

所以目前,做一到六的读取  

7.HEAD插件查看

Elasticsearch集群安装

选出01做主节点

8.启动第三个节点

Elasticsearch集群安装

9.启动成功

Elasticsearch集群安装

因为选举已经结束,所以不会改变结果

10.head查看

Elasticsearch集群安装

11.在进群中连接负载均衡器写入一些数据(index01,index02)

#curl -XPUT http://IP:9200/index06

Elasticsearch集群安装

Elasticsearch集群安装

实现高可用,当01宕机.02,03 选举id最小的顶替,

  • 配置文件中的分片和副本默认值
  • index.number_of_shards: 5 
  • 设置索引的副本数,默认为1: 
  • index.number_of_replicas: 1 

index06在创建时,会经过master(activeMaster)根据配置文件计算

分片数量,副本数量,记录metadata 将索引数据切分到datanode

PS:分片无法控制,是选举的master负责分配


ES集群搭建完成

相关文章:

  • 2022-01-16
  • 2022-02-23
  • 2021-09-01
  • 2021-10-09
  • 2021-11-28
  • 2021-04-04
  • 2022-12-23
猜你喜欢
  • 2021-04-21
  • 2021-09-10
  • 2021-06-08
  • 2021-08-31
  • 2021-05-31
  • 2022-12-23
相关资源
相似解决方案