广东官方移动网站建设哪家好,wordpress flv插件,经营性商务网站建设需要备案吗,公司做网站设计的单机的elasticsearch做数据存储#xff0c;必然面临两个问题:海量数据存储问题、单点故障问题。为了解决存储能力上上限问题就可以用到集群部署。 海量数据存储问题:将索引库从逻辑上拆分为N个分片(shard)#xff0c;存储到多个节点单点故障问题:将分片数据在不同节点备份 (r… 单机的elasticsearch做数据存储必然面临两个问题:海量数据存储问题、单点故障问题。为了解决存储能力上上限问题就可以用到集群部署。 海量数据存储问题:将索引库从逻辑上拆分为N个分片(shard)存储到多个节点单点故障问题:将分片数据在不同节点备份 (replica ) 目录
一、部署es集群
二、集群搭建案例利用3个docker容器模拟3个es的节点
2.1 首先编写一个docker-compost文件代码如下
2.2 es运行需要修改一些lintx系统权限 2.3 集群状态监控cerebro 2.4 创建索引库 一、部署es集群
在单机上利用docker容器运行多个es实例来模拟es集群。在生产环境中推荐每一台服务节点仅部署一个es的实例。 部署es集群可以直接使用docker-compose来完成但要求Linux虚拟机至少有4GI的内存空间。
二、集群搭建案例利用3个docker容器模拟3个es的节点 2.1 首先编写一个docker-compost文件代码如下
version:2.2
services:es01:image: elasticsearch:7.12.1container_name: es01environment:- node .nameego1-cluster.namees-docker-cluster-discovery.seed_hostses02,es3-cluster.initial_master_nodeses1es02 ,es03-ES_JAVA_OPTS-Xms512m -Xmx512mvolumes:-data01:/usr/share/elasticsearch/dataports:-9200:9200networks:-elastices02:image: elasticsearch:7.12.1container_name: es02environment:-node.namees02-cluster.namees-docker-cluster-discovery.seed_hostses01,es03-cluster.initial_master_nodeses01,es02,es03-ES_JAVA_OPTS-Xms512m -Xmx512mvolumes:-data02:/usr/share/elasticsearch/dataports:9201:9200networks:-elastices03:image: elasticsearch:7.12.1container_name: es03environment:-node.namees03-cluster.namees-docker-cluster-discovery.seed_hostses01,es02-cluster.initial_master_nodeses01,es02,es03-ES_JAVA_OPTS-Xms512m -Xmx512mvolumes:-data03:/usr/share/elasticsearch/dataports:9202:9200networks:-elastic2.2 es运行需要修改一些lintx系统权限
(1) 修改 /etc/sysctl.conf 文件 vi /etc/sysctl.conf (2) 添加下面的内容 vm.max_map_count262144 (3) 然后执行命令让配置生效 sysctl -p (4) 通过docker-compose启动集群 docker-compose up -d 2.3 集群状态监控cerebro
kibana可以监控es集群不过新版本需要依赖es的x-pack 功能配置比较复杂。
推荐使用cerebro来监控es集群状态官方网址:https://github.com/lmenezes/cerebro 启动 cerebro 服务 访问登录cerebro 集群状态 2.4 创建索引库
第一种方式利用kibana的DevTools创建索引库 ,在DevTools中输入指令 PuT /itcast { settings : { number_of_shards: 3// 分片款量 number_of_replicas: 1 // 副本数 }, mappings : { properties:{ //mapping晚射定义 } } } 第二种方式利用cerebro创建索引库 填写索引库信息
