zk(ZooKeeper)在gRPC(Google Remote Procedure Call)服务中起到了服务发现和协调的作用,但它也可能导致负载不均衡的问题。本文主要探讨了在xueqiu-grpc系统中,由于zk的使用引发的服务请求分布不均的现象以及可能的原因。 首先,xueqiu-grpc的调用原理依赖于zk来维护服务列表和服务实例信息,客户端通过zk进行服务发现。然而,当zk在短时间内承受高负载,可能导致客户端与zk的连接不稳定,进而造成服务请求分配的不均衡。虽然初步的验证未发现明显的连接断开异常,但在特定时间点,与zk相关的日志显著增加,推测这可能是由于大量zkWatch(zk的事件监听器)被触发。 其次,问题分析深入到zk的watch机制。每当zk中的service节点发生任何变动,即使服务提供者列表没有变化,也会触发watch事件,如心跳事件(heartbeatEvent)。这种事件会促使客户端刷新本地的所有nameResolvers,并向zk查询最新的服务实例,导致zk接收和发送大量数据包。当服务频繁升级或zk的watch粒度过大时,就会引发对zk的过度请求,进而影响整体负载均衡。 猜想3提出,可能是负载均衡算法设计导致的问题,即每次nameResolvers刷新时,新的Picker对象会被创建,它倾向于优先请求列表中的第一个实例。由于所有客户端和服务实例都同步刷新,这可能导致某个服务实例的QPS(每秒请求数)骤然上升至平时的2-3倍,形成不均衡。 针对这个问题,文章提到了grpc-core库的代码修复,如PR#4462,该修复可能涉及到优化Picker的行为或者改进服务发现的逻辑,以减少因refresh操作引起的请求波动。此外,还提到了一些版本信息,如1.9.0和1.15.1,这可能暗示着修复是在这些版本之后实施的。 最后,测试环境的演示和文档说明部分,详细记录了如何重现问题、验证猜想以及执行的修复措施。这部分内容对于理解问题的全面性解决至关重要,它可能包括性能监控数据、压力测试结果和实际应用中的性能改善情况。 总结来说,zk在gRPC中的使用虽然提供了便利的服务发现功能,但也带来了一定的挑战,特别是当zk负载过大或者服务发现机制设计不合理时,可能导致服务请求的不均衡。通过深入分析和代码审查,团队已经找到了问题的关键,并尝试通过代码修复和调整策略来优化系统性能,确保负载均衡。
![](https://csdnimg.cn/release/download_crawler_static/15450701/bg4.jpg)
剩余17页未读,继续阅读
![rar](https://img-home.csdnimg.cn/images/20210720083606.png)
![rar](https://img-home.csdnimg.cn/images/20210720083606.png)
![doc](https://img-home.csdnimg.cn/images/20210720083327.png)
![-](https://csdnimg.cn/download_wenku/file_type_column_c1.png)
![-](https://csdnimg.cn/download_wenku/file_type_column_c1.png)
![-](https://csdnimg.cn/download_wenku/file_type_column_c1.png)
![-](https://csdnimg.cn/download_wenku/file_type_column_c1.png)
![-](https://csdnimg.cn/download_wenku/file_type_column_c1.png)
![](https://csdnimg.cn/download_wenku/file_type_ask_c1.png)
![](https://csdnimg.cn/download_wenku/file_type_ask_c1.png)
![](https://csdnimg.cn/download_wenku/file_type_ask_c1.png)
![](https://csdnimg.cn/download_wenku/file_type_ask_c1.png)
![](https://csdnimg.cn/download_wenku/file_type_ask_c1.png)
![](https://csdnimg.cn/download_wenku/file_type_ask_c1.png)
![](https://csdnimg.cn/download_wenku/file_type_ask_c1.png)
![](https://csdnimg.cn/download_wenku/file_type_ask_c1.png)
![](https://csdnimg.cn/download_wenku/file_type_ask_c1.png)
![](https://csdnimg.cn/download_wenku/file_type_ask_c1.png)
![](https://csdnimg.cn/download_wenku/file_type_ask_c1.png)
![](https://profile-avatar.csdnimg.cn/333eea87410e410d856bb714eaec372c_singgel.jpg!1)
- 粉丝: 604
- 资源: 55
我的内容管理 展开
我的资源 快来上传第一个资源
我的收益
登录查看自己的收益我的积分 登录查看自己的积分
我的C币 登录后查看C币余额
我的收藏
我的下载
下载帮助
![](https://csdnimg.cn/release/wenkucmsfe/public/img/voice.245cc511.png)
最新资源
- 计算机人脸表情动画技术发展综述
- 关系数据库的关键字搜索技术综述:模型、架构与未来趋势
- 迭代自适应逆滤波在语音情感识别中的应用
- 概念知识树在旅游领域智能分析中的应用
- 构建is-a层次与OWL本体集成:理论与算法
- 基于语义元的相似度计算方法研究:改进与有效性验证
- 网格梯度多密度聚类算法:去噪与高效聚类
- 网格服务工作流动态调度算法PGSWA研究
- 突发事件连锁反应网络模型与应急预警分析
- BA网络上的病毒营销与网站推广仿真研究
- 离散HSMM故障预测模型:有效提升系统状态预测
- 煤矿安全评价:信息融合与可拓理论的应用
- 多维度Petri网工作流模型MD_WFN:统一建模与应用研究
- 面向过程追踪的知识安全描述方法
- 基于收益的软件过程资源调度优化策略
- 多核环境下基于数据流Java的Web服务器优化实现提升性能
![](https://img-home.csdnimg.cn/images/20220527035711.png)
![](https://img-home.csdnimg.cn/images/20220527035111.png)
![](https://csdnimg.cn/release/wenkucmsfe/public/img/green-success.6a4acb44.png)