有赞大数据平台的HBase实践与管控系统解析
需积分: 5 201 浏览量
更新于2024-06-21
收藏 1.54MB PDF 举报
"藏经阁-HBase 在有赞的平台实践和应用.pdf" 是一篇关于有赞公司使用HBase的大数据平台实践经验的文章,该文出自中国HBase技术社区。
文章首先介绍了有赞的大数据平台背景,其中HBase作为关键组件,被定位为一个多集群容灾存储系统,提供在线实时访问能力,同时也支持离线批量导入导出,适用于非敏感实时读取和数据冷备。此外,HBase还作为OpenTSDB监控数据存储以及Kylin的后端存储,服务于在线服务和离线计算场景。集群规划方面,有赞采用了四大集群的架构,包括两个在线服务主备集群,一个离线集群,以及一个专门的日志业务独立集群。
针对管控平台的部分,文章提到原有监控系统的局限性,如混布问题导致的业务管理和运维困难,单一的告警配置,以及缺乏有效的迁移工具。为解决这些问题,有赞构建了一个集项目、资源、人为一体的业务管控系统,实现了工单管理、权限控制和全面的监控大盘。通过工单流程审批建表操作,确保了操作的可追溯性。用户可以申请项目级别的权限,查看表的元信息和监控数据。监控系统则设计得面向业务用户,提供了易用的查询工具,并具备强大的集群迁移功能。
文章的后续部分可能涵盖了HBase在有赞的具体改造实践以及未来的规划,包括可能的技术优化、性能提升、新的应用场景探索等,但具体内容未在摘要中给出。总体来看,这篇文章深入探讨了HBase在实际业务环境中的挑战、解决方案以及持续演进的方向,对于理解大规模分布式数据库在企业级应用中的运用具有很高的参考价值。
2023-05-01 上传
2023-06-07 上传
2023-10-26 上传
2023-12-21 上传
2023-11-24 上传
2023-09-09 上传
![](https://profile-avatar.csdnimg.cn/28105908048e4518a28a3457cdef3389_weixin_40191861.jpg!1)
weixin_40191861_zj
- 粉丝: 78
- 资源: 1万+
最新资源
- 解决本地连接丢失无法上网的问题
- BIOS报警声音解析:故障原因与解决方法
- 广义均值移动跟踪算法在视频目标跟踪中的应用研究
- C++Builder快捷键大全:高效编程的秘密武器
- 网页制作入门:常用代码详解
- TX2440A开发板网络远程监控系统移植教程:易搭建与通用解决方案
- WebLogic10虚拟内存配置详解与优化技巧
- C#网络编程深度解析:Socket基础与应用
- 掌握Struts1:Java MVC轻量级框架详解
- 20个必备CSS代码段提升Web开发效率
- CSS样式大全:字体、文本、列表样式详解
- Proteus元件库大全:从基础到高级组件
- 74HC08芯片:高速CMOS四输入与门详细资料
- C#获取当前路径的多种方法详解
- 修复MySQL乱码问题:设置字符集为GB2312
- C语言的诞生与演进:从汇编到系统编程的革命