当前位置: 首页 > news >正文

Elasticsearch 集群搭建

搭建

防止JVM报错,修改JVM线程信息数:

sysctl -w vm.max_map_count=262144

永久修改:

echo vm.max_map_count=262144 >> /etc/sysctl.conf
sysctl -p

创建docker网络:

docker network ls

docker network create --driver bridge --subnet=172.18.12.0/16 --gateway=172.18.1.1 mynet

查看网络信息:

docker network inspect mynet

在这里插入图片描述

准备三个master节点:

cd /mydata/elasticsearch/
for port in $(seq 1 3); \
do \
mkdir -p /mydata/elasticsearch/master-${port}/config
mkdir -p /mydata/elasticsearch/master-${port}/data
chmod -R 777 /mydata/elasticsearch/master-${port}
cat << EOF >/mydata/elasticsearch/master-${port}/config/elasticsearch.yml
cluster.name: my-es  #集群的名称,同一个集群该值必须设置成相同的
node.name: es-master-${port} #该节点的名字
node.master: true #该节点有机会成为 master 节点
node.data: false #该节点可以存储数据
network.host: 0.0.0.0
http.host: 0.0.0.0 #所有 http 均可访
http.port: 920${port}
transport.tcp.port: 930${port}
#discovery.zen.minimum_master_nodes: 2 #设置这个参数来保证集群中的节点可以知道其它N个有master资格的节点

discovery.zen.ping_timeout: 30s
discovery.seed_hosts: ["172.18.12.21:9301", "172.18.12.22:9302", "172.18.12.23:9303"] #设置集群中的 Master 节点的初始列表,可以通过这些节点来自动发现其他新加入集群的节点,es7的新增配置

cluster.initial_master_nodes: ["172.18.12.21"] #新集群初始时的候选主节点,es7的新增配置
EOF
docker run --name elasticsearch-node-${port} \
-p 920${port}:920${port} -p 930${port}:930${port} \
--network=mynet --ip 172.18.12.2${port} \
-e ES_JAVA_OPTS="-Xms300m -Xmx300m" \
-v /mydata/elasticsearch/master-${port}/config/elasticsearch.yml:/usr/share/elasticsearch/config/elasticsearch.yml \
-v /mydata/elasticsearch/master-${port}/data:/usr/share/elasticsearch/data \
-v /mydata/elasticsearch/master-${port}/plugins:/usr/share/elasticsearch/plugins \
-d elasticsearch:7.4.2
done

三个容器已启动
在这里插入图片描述

查看节点:

docker ps
ll

在这里插入图片描述

准备三个node节点:

for port in $(seq 4 6); \
do \
mkdir -p /mydata/elasticsearch/node-${port}/config
mkdir -p /mydata/elasticsearch/node-${port}/data
chmod -R 777 /mydata/elasticsearch/node-${port}
cat << EOF >/mydata/elasticsearch/node-${port}/config/elasticsearch.yml
cluster.name: my-es #集群的名称,同一个集群该值必须设置成相同的
node.name: es-node-${port} #该节点的名字
node.master: false #该节点有机会成为 master 节点
node.data: true #该节点可以存储数据
network.host: 0.0.0.0
#network.publish_host: 192.168.56.10 #互相通信 ip,要设置为本机可被外界访问的 ip,否则无法通信
http.host: 0.0.0.0 #所有 http 均可访
http.port: 920${port}
transport.tcp.port: 930${port}
#discovery.zen.minimum_master_nodes: 2 #设置这个参数来保证集群中的节点可以知道其它N个有 master 资格的节点。
discovery.zen.ping_timeout: 30s
discovery.seed_hosts: ["172.18.12.21:9301", "172.18.12.22:9302", "172.18.12.23:9303"]  #设置集群中的 Master 节点的初始列表,可以通过这些节点来自动发现其他新加入集群的节点,es7的新增配置
cluster.initial_master_nodes: ["172.18.12.21"] #新集群初始时的候选主节点,es7的新增配置
EOF
docker run --name elasticsearch-node-${port} \
-p 920${port}:920${port} -p 930${port}:930${port} \
--network=mynet --ip 172.18.12.2${port} \
-e ES_JAVA_OPTS="-Xms300m -Xmx300m" \
-v /mydata/elasticsearch/node-${port}/config/elasticsearch.yml:/usr/share/elasticsearch/config/elasticsearch.yml \
-v /mydata/elasticsearch/node-${port}/data:/usr/share/elasticsearch/data \
-v /mydata/elasticsearch/node-${port}/plugins:/usr/share/elasticsearch/plugins \
-d elasticsearch:7.4.2
done

在这里插入图片描述

查看node节点信息

docker ps

若启动过程中三个node节点出现启动不成功问题 :由于上面配置没有生效,修改配置,

echo vm.max_map_count=262144 >> /etc/sysctl.conf

sysctl -p

重新启动容器命令:docker start +容器id或容器名,查看容器运行详细信息

docker ps -a
docker start elasticsearch-node-1 elasticsearch-node-2 elasticsearch-node-3
docker start elasticsearch-node-4 elasticsearch-node-5 elasticsearch-node-6

在这里插入图片描述

查看ip:

ip addr

查看某个节点的日志:

docker logs elasticsearch-node-1
docker logs elasticsearch-node-2
docker logs elasticsearch-node-3
docker logs elasticsearch-node-4
docker logs elasticsearch-node-5
docker logs elasticsearch-node-6

所有显示出cluster.name": "my-es"等信息,没有报错就是启动成功。

在这里插入图片描述

测试集群工作状况

访问虚拟机ip及es端口,每个节点都可以正常访问

在这里插入图片描述

给任意节点发送请求:

http://192.168.56.10:9201/_nodes/process?pretty 查看节点状况
http://192.168.56.10:9201/_cluster/stats?pretty 查看集群状态
http://192.168.56.10:9201/_cluster/health?pretty 查看集群健康状况
http://192.168.56.10:9202/_cat/nodes 查看各个节点信息
$ curl localhost:9200/_cat
/_cat/allocation
/_cat/shards
/_cat/shards/{index}
/_cat/master
/_cat/nodes
/_cat/indices
/_cat/indices/{index}
/_cat/segments
/_cat/segments/{index}
/_cat/count
/_cat/count/{index}
/_cat/recovery
/_cat/recovery/{index}
/_cat/health
/_cat/pending_tasks
/_cat/aliases
/_cat/aliases/{alias}
/_cat/thread_pool
/_cat/plugins
/_cat/fielddata
/_cat/fielddata/{fields}
/_cat/nodeattrs
/_cat/repositories
/_cat/snapshots/{repository}

标记*号的就是当前主节点

http://192.168.56.10:9201/_cat/nodes

在这里插入图片描述

查看节点健康状况:

http://192.168.56.10:9201/_cat/health

在这里插入图片描述

查看集群状态信息:可以查看每个节点的信息

http://192.168.56.10:9201/_cluster/stats?pretty 

在这里插入图片描述

查看集群所有节点健康状况:

http://192.168.56.10:9201/_cluster/health?pretty

在这里插入图片描述

模拟某个节点宕机

主节点es-master-2宕机:

docker stop elasticsearch-node-2

在这里插入图片描述

查看节点状态,发现es-master-1成为主节点

在这里插入图片描述

重新启动停掉的主节点es-master-2,发现主节点还是es-master-1

docker start elasticsearch-node-2

在这里插入图片描述

相关文章:

  • spring cloud 快速上手系列 -> 03-消息队列 Stream -> 035-发送消息
  • 【SpringBoot2】SSMP整合综合案例(上)
  • 【JavaScript】JS开发中五个常用功能/案例(41-45)(牛客题解)
  • Go 语言 设计模式-抽象工厂模式
  • 全网没有之一的API 文档:Swagger
  • dubbo环境搭建ZooKeeper注册中心
  • (附源码)ssm教师工作量核算统计系统 毕业设计 162307
  • 欧拉函数算法的实现
  • Ubuntu 创建本地 Git 并与 Github(私有库) 交互(上传与下载)| 记录 | 踩坑
  • 6.0、软件测试——判定表法
  • 面试题~~
  • 容斥原理算法的实现
  • 【爬虫】Python使用动态IP,多线程,爬取uncomtrade的数据
  • 【国科大——认知计算】认知计算 第一次研讨课
  • 20天深度复习JavaSE的详细笔记(十二)——集合(Collection、数据结构、List、泛型深入)
  • hexo+github搭建个人博客
  • 03Go 类型总结
  • CentOS从零开始部署Nodejs项目
  • css布局,左右固定中间自适应实现
  • overflow: hidden IE7无效
  • windows下使用nginx调试简介
  • 记一次和乔布斯合作最难忘的经历
  • 浅谈Kotlin实战篇之自定义View图片圆角简单应用(一)
  • 让你成为前端,后端或全栈开发程序员的进阶指南,一门学到老的技术
  • 用mpvue开发微信小程序
  • - 转 Ext2.0 form使用实例
  • ionic入门之数据绑定显示-1
  • 扩展资源服务器解决oauth2 性能瓶颈
  • ​一些不规范的GTID使用场景
  • ​用户画像从0到100的构建思路
  • (+4)2.2UML建模图
  • (1/2) 为了理解 UWP 的启动流程,我从零开始创建了一个 UWP 程序
  • (10)工业界推荐系统-小红书推荐场景及内部实践【排序模型的特征】
  • (3)医疗图像处理:MRI磁共振成像-快速采集--(杨正汉)
  • (31)对象的克隆
  • (C语言)二分查找 超详细
  • (delphi11最新学习资料) Object Pascal 学习笔记---第8章第5节(封闭类和Final方法)
  • (Matlab)基于蝙蝠算法实现电力系统经济调度
  • (pytorch进阶之路)扩散概率模型
  • (黑客游戏)HackTheGame1.21 过关攻略
  • (排序详解之 堆排序)
  • (七)微服务分布式云架构spring cloud - common-service 项目构建过程
  • (一) springboot详细介绍
  • (一)Linux+Windows下安装ffmpeg
  • (转)Google的Objective-C编码规范
  • (转)视频码率,帧率和分辨率的联系与区别
  • *++p:p先自+,然后*p,最终为3 ++*p:先*p,即arr[0]=1,然后再++,最终为2 *p++:值为arr[0],即1,该语句执行完毕后,p指向arr[1]
  • .NET 5种线程安全集合
  • .NET CF命令行调试器MDbg入门(二) 设备模拟器
  • .net framework4与其client profile版本的区别
  • .net php 通信,flash与asp/php/asp.net通信的方法
  • .NET技术成长路线架构图
  • [ 隧道技术 ] 反弹shell的集中常见方式(二)bash反弹shell
  • []利用定点式具实现:文件读取,完成不同进制之间的
  • [2021 蓝帽杯] One Pointer PHP