携程ES跨集群搜索实践:解决大集群痛点的有效方案
需积分: 5 160 浏览量
更新于2024-06-21
收藏 457KB PDF 举报
藏经阁-ES Cross Cluster Search生产实践
本文档主要介绍了携程ES跨集群搜索实践,讨论了大集群痛点、需求、指导思想、架构简介、利弊分析、项目不足和注意点等方面的内容。
**大集群痛点**
在大集群环境中,meta信息太多,导致全量更新压力大,经常超时;单节点过载,影响整个集群的状态更新;master切换时无法响应,集群不能正常工作。
**需求**
为了解决大集群痛点,我们需要对用户透明,满足并发量(5千万/天),不侵入ES,多版本兼容,不影响日后升级。
**指导思想**
我们的指导思想是尽量不造轮子(nginx+cross-cluster-search+ESProxy),满足需求就可以,不需要更加高大上,不做数据处理,只做权限验证+请求转发,结构最好清楚明了,便于日后维护。
**Cross-Cluster Search**
Cross-Cluster Search是Elasticsearch的一个功能,可以实现跨集群搜索,解决大集群痛点。Cross-Cluster Search允许用户在多个集群之间进行搜索,提高搜索效率和准确性。
**架构简介**
我们的架构简介包括Proxy配置和Nginx配置一览。Proxy配置主要用于转发请求,Nginx配置一览用于负载均衡和反向代理。
**利弊分析**
Cross-Cluster Search的利弊分析表明,解决大集群痛点的同时,也带来了更多可能的隐患,额外的开发和运维成本。
**项目不足**
我们的项目不足在于太多转发,配置偏复杂。
**注意点**
在使用Cross-Cluster Search时,需要注意其中一个集群挂掉,Cross-Cluster Search会不可用,需要ignore_unavailable。
**结论**
本文档介绍了携程ES跨集群搜索实践,讨论了大集群痛点、需求、指导思想、架构简介、利弊分析、项目不足和注意点等方面的内容,为读者提供了一份详细的生产实践报告。
2023-08-30 上传
2023-08-28 上传
2023-08-26 上传
2023-08-28 上传
2023-09-11 上传
2023-09-05 上传
2023-08-29 上传
weixin_40191861_zj
- 粉丝: 83
- 资源: 1万+
最新资源
- 前端协作项目:发布猜图游戏功能与待修复事项
- Spring框架REST服务开发实践指南
- ALU课设实现基础与高级运算功能
- 深入了解STK:C++音频信号处理综合工具套件
- 华中科技大学电信学院软件无线电实验资料汇总
- CGSN数据解析与集成验证工具集:Python和Shell脚本
- Java实现的远程视频会议系统开发教程
- Change-OEM: 用Java修改Windows OEM信息与Logo
- cmnd:文本到远程API的桥接平台开发
- 解决BIOS刷写错误28:PRR.exe的应用与效果
- 深度学习对抗攻击库:adversarial_robustness_toolbox 1.10.0
- Win7系统CP2102驱动下载与安装指南
- 深入理解Java中的函数式编程技巧
- GY-906 MLX90614ESF传感器模块温度采集应用资料
- Adversarial Robustness Toolbox 1.15.1 工具包安装教程
- GNU Radio的供应商中立SDR开发包:gr-sdr介绍