3月客渠技术月刊:Kafka消费积压与异常引发的UIOC经验与技术分享
需积分: 0 115 浏览量
更新于2024-07-01
收藏 3.17MB PDF 举报
在客渠技术月刊-3月1中,本期内容主要聚焦于一系列IT领域的经验和技术创新。首先,"经验总结:Kafka消费堆积引发的UIOC3"讲述了在2022年3月7日,客户接入服务系统MCS-CAS-EXP(快递服务)的UIOC系统(S级)遇到了因Kafka消费堆积问题引发的故障。该事件从17:54:00持续至22:21:00,影响了部分用户的清单运费、路由、回告和寄件码数据的推送,对拼多多和唯品会等平台造成了影响,如唯品会的200单寄件码数据回传延迟和拼多多的回告数据推送速率抖动。
故障起因是由于shiva-oms-sws系统的容灾演练导致Kafka消费者未及时处理清单运费数据,进而引发了异常。研发团队通过一系列操作,包括重启sync模块,处理了未消费的数据,并在17:26:00确认系统恢复正常。然而,随后在18:07:00发现拼多多回告数据出现了消费积压,通过UIOC进一步定位问题,发现是Kafka的Rebalance触发了消费效率下降。
针对唯品会的消费组,团队采取了降低线程数和推送频率的措施来缓解压力。此外,本期还分享了其他技术内容,如"技术分享:JAVA8特性之Stream",介绍了Java 8的新特性及其在开发中的应用;"技术分享:JAVA锁机制"深入探讨了Java中的锁机制,这对于理解并发控制至关重要。
"微创新"部分涵盖了几个创新项目,如H5可配置嵌入式销售工具、强互动类营销创意前端解决方案、基于海量业务日志的实时监控以及Flink与StarRocks结合的客服体验提升。这些创新展示了团队在应对实际问题时的技术突破和创新能力。
"技术前沿"部分则探讨了业务场景下的实践案例,例如去哪儿网的大规模容器化最佳实践,以及无服务器系统设计模式的应用。同时,还提及了一种性格测试带来的低成本商业模式的成功案例。
最后,月刊鼓励大家积极投稿,分享更多的技术心得和实践经验。整个内容丰富多样,不仅有实战经验的总结,还有技术趋势的探索,体现了IT行业动态和专业深度。
2010-02-07 上传
2022-08-03 上传
2014-03-18 上传
2013-01-05 上传
2009-11-20 上传
2010-02-20 上传
2009-03-11 上传
Friday永不为奴
- 粉丝: 20
- 资源: 317
最新资源
- Angular程序高效加载与展示海量Excel数据技巧
- Argos客户端开发流程及Vue配置指南
- 基于源码的PHP Webshell审查工具介绍
- Mina任务部署Rpush教程与实践指南
- 密歇根大学主题新标签页壁纸与多功能扩展
- Golang编程入门:基础代码学习教程
- Aplysia吸引子分析MATLAB代码套件解读
- 程序性竞争问题解决实践指南
- lyra: Rust语言实现的特征提取POC功能
- Chrome扩展:NBA全明星新标签壁纸
- 探索通用Lisp用户空间文件系统clufs_0.7
- dheap: Haxe实现的高效D-ary堆算法
- 利用BladeRF实现简易VNA频率响应分析工具
- 深度解析Amazon SQS在C#中的应用实践
- 正义联盟计划管理系统:udemy-heroes-demo-09
- JavaScript语法jsonpointer替代实现介绍