黑龙江省建设官方网站,做a网站,网站设计需要哪些,网站建设阶段性工作重点转载自 ES集群管理
8 集群管理
ES通常以集群方式工作#xff0c;这样做不仅能够提高 ES的搜索能力还可以处理大数据搜索的能力#xff0c;同时也增加了系统的容错能力及高可用#xff0c;ES可以实现PB级数据的搜索。 下图是ES集群结构的示意图#xff1a; 从上图总结以下…转载自 ES集群管理
8 集群管理
ES通常以集群方式工作这样做不仅能够提高 ES的搜索能力还可以处理大数据搜索的能力同时也增加了系统的容错能力及高可用ES可以实现PB级数据的搜索。 下图是ES集群结构的示意图 从上图总结以下概念 1、结点 ES集群由多个服务器组成每个服务器即为一个Node结点(该服务只部署了一个ES进程)。
2、分片 当我们的文档量很大时由于内存和硬盘的限制同时也为了提高ES的处理能力、容错能力及高可用能力我们将索引分成若干分片每个分片可以放在不同的服务器这样就实现了多个服务器共同对外提供索引及搜索服务。 一个搜索请求过来会分别从各各分片去查询最后将查询到的数据合并返回给用户。
3、副本 为了提高ES的高可用同时也为了提高搜索的吞吐量我们将分片复制一份或多份存储在其它的服务器这样即使当前的服务器挂掉了拥有副本的服务器照常可以提供服务。
4、主结点 一个集群中会有一个或多个主结点主结点的作用是集群管理比如增加节点移除节点等主结点挂掉后ES会重新选一个主结点。
5、结点转发 每个结点都知道其它结点的信息我们可以对任意一个结点发起请求接收请求的结点会转发给其它结点查询数据。 8.2 搭建集群
下边的例子实现创建一个2结点的集群并且索引的分片我们设置2片每片一个副本
8.2.1 结点的三个角色
主结点master节点主要用于集群的管理及索引 比如新增结点、分片分配、索引的新增和删除等。 数据结点data 节点上保存了数据分片它负责索引和搜索操作。 客户端结点client 节点仅作为请求客户端存在client的作用也作为负载均衡器client 节点不存数据只是将请求均衡转发到其它结点。
通过下边两项参数来配置结点的功能 node.master: #是否允许为主结点 node.data: #允许存储数据作为数据结点 node.ingest: #是否允许成为协调节点 四种组合方式 mastertruedatatrue即是主结点又是数据结点 masterfalsedatatrue仅是数据结点 mastertruedatafalse仅是主结点不存储数据 masterfalsedatafalse即不是主结点也不是数据结点此时可设置ingest为true表示它是一个客户端
8.2.2创建结点 1
解压elasticsearch-6.2.1.zip 结点1对外服务的http端口是9200 集群管理端口是9300 配置elasticsearch.yml 结点名xc_node_1 elasticsearch.yml内容如下
cluster.name: xuecheng
node.name: xc_node_1
network.host: 0.0.0.0
http.port: 9200
transport.tcp.port: 9300
node.master: true
node.data: true
discovery.zen.ping.unicast.hosts: [0.0.0.0:9300, 0.0.0.0:9301]
discovery.zen.minimum_master_nodes: 1
node.ingest: true
bootstrap.memory_lock: false
node.max_local_storage_nodes: 2path.data: D:\develop\elasticsearch\elasticsearch-6.2.1-1\data
path.logs: D:\develop\elasticsearch\elasticsearch-6.2.1-1\logshttp.cors.enabled: true
http.cors.allow-origin: /.*/8.2.3创建结点 2
操作与节点1一样
cluster.name: xuecheng
node.name: xc_node_2
network.host: 0.0.0.0
http.port: 9201
transport.tcp.port: 9301
node.master: true
node.data: true
discovery.zen.ping.unicast.hosts: [0.0.0.0:9300, 0.0.0.0:9301]
discovery.zen.minimum_master_nodes: 1
node.ingest: true
bootstrap.memory_lock: false
node.max_local_storage_nodes: 2path.data: D:\develop\elasticsearch\elasticsearch-6.2.1-2\data
path.logs: D:\develop\elasticsearch\elasticsearch-6.2.1-2\logshttp.cors.enabled: true
http.cors.allow-origin: /.*/8.2.4 创建索引库
1使用head连上其中一个结点 上图表示两个结点已经创建成功。 2下边创建索引库共2个分片每个分片一个副本 创建成功刷新head: 上图可以看到共有4个分片其中两个分片是副本。 3每个结点安装IK分词器
8.2.5 集群的健康
通过访问 GET /_cluster/health 来查看Elasticsearch 的集群健康情况。 用三种颜色来展示健康状态 green 、 yellow 或者 red 。 green所有的主分片和副本分片都正常运行。 yellow所有的主分片都正常运行但有些副本分片运行不正常。 red存在主分片运行不正常。
8.3 测试
1创建映射并写入文档 连接 其中任意一台结点创建映射写入文档。 2搜索 向其它一个结点发起搜索请求查询全部数据。 3关闭一个结点 ES会重新选中一个主结点前提在配置结点时允许它可以为主结点
