滴滴Fusion实践:从NoSQL到NewSQL的演进
169 浏览量
更新于2024-08-27
收藏 1.65MB PDF 举报
"滴滴NewSQL演进之Fusion实践"
在滴滴的数据库演进过程中,Fusion作为其自研的成熟NoSQL系统,扮演了至关重要的角色。Fusion系统基于RocksDB引擎,通过添加网络层、集群管理层和接入层,构建了一个强大的分布式存储解决方案,能够处理海量的数据和提供高吞吐能力。它不仅满足了内部400多个业务的需求,还在全公司范围内广泛使用,拥有300多个集群,总数据量高达1500TB,峰值QPS(每秒查询率)超过1400万次,实现了全自动化运维,无需专门的运营人员参与。
Fusion最初的诞生,旨在解决历史订单和司机行程轨迹的存储问题。随着滴滴业务的发展,这两个数据量庞大的业务对存储系统的性能提出了更高要求。传统的Redis和MySQL在处理这种规模的数据时显得力不从心,于是Fusion应运而生。Fusion支持Redis协议,利用RocksDB的持久化存储能力,有效应对了大规模数据的挑战。
在此基础上,滴滴进一步发展了NewSQL系统,即dise。dise在Fusion的基础上增强了功能,引入了schema管理、二级索引、事务处理和binlog等功能,使得系统具备了传统关系型数据库的事务能力及SQL支持,从而更好地适应了需要复杂查询和事务处理的业务场景。
为了提升整体架构的效率和智能化,滴滴构建了一套智能管控系统,该系统依托于salt-stack平台,包含了用户系统和运维系统。用户系统简化了业务接入流程,而运维系统则实现了自动化运维,有效地降低了管理和维护成本。
展望未来,滴滴的数据库演进还涉及到了分布式数据库的规划。这将意味着更高级别的可扩展性和容错性,以应对日益增长的业务需求和数据规模。这样的演进策略展示了滴滴在数据库技术领域的持续创新和追求卓越的精神。
滴滴的Fusion和NewSQL演进之路体现了从NoSQL到NewSQL的自然过渡,以及如何在实际业务中逐步优化和增强存储系统的能力,以适应不断变化的业务场景。这一过程不仅展示了技术上的创新,也体现了对业务需求深入理解和灵活应对的智慧。
2019-08-28 上传
2021-10-25 上传
2023-09-09 上传
点击了解资源详情
2021-12-15 上传
2021-10-14 上传
2021-10-16 上传
weixin_38523251
- 粉丝: 3
- 资源: 884
最新资源
- 西藏 乡镇级区划图 shp格式
- ckserver-开源
- Geronimo-Updater
- getdelta:获取两点之间坐标变化的简单小部件。-matlab开发
- ksbtechies-crx插件
- 算术计算和排序:基本算术计算和排序练习
- OBD完整协议.rar
- JS实现全景预览图片效果-360°旋转查看.rar
- Miracle:JavaScript Sega主系统模拟器
- XSockets-开源
- hipsum:Hangul Lorem Ipsum
- hyperspace:开源索引子系统,可将基于索引的查询加速带入Apache Spark:trade_mark:和大数据工作负载
- 车架1-阿蒂维达德-决赛
- ZD OSS-开源
- XX矿业有限公司规章制度汇编
- train-db-