淘宝数据库架构演进:从垂直化到服务化
需积分: 12 61 浏览量
更新于2024-08-18
收藏 1.59MB PPT 举报
"数据垂直化是淘宝开发平台架构中的一个重要策略,它是在应用中心化之后,将底层数据库系统按照不同的业务数据进行拆分,从而提高系统性能和数据处理效率。这种拆分方式简单易行,只需将不同业务的数据分离,避免了不同业务间的读写操作相互干扰。然而,业务内部的问题仍然存在,例如用户、商品、交易、评价等业务各自独立,分别有自己的数据库。"
淘宝数据库架构经历了三个主要阶段。初期,由于业务快速发展,单机式的MySQL迅速达到性能瓶颈。随后,淘宝将MySQL迁移到Oracle并在小型机上运行,以应对高并发和数据实时性的需求。尽管这在一段时间内满足了业务增长,但随着业务量的持续攀升,技术层面也需随之进化。
在第二阶段,淘宝面临数据库连接数的限制,小型机的内存不足以支持大量的并发连接。为了解决这个问题,淘宝构建了用户、商品、交易三大中心,并引入HSF(High Speed Service Framework)作为服务间远程通信的解决方案,减少了数据库的OLTP join操作。
进入第三阶段,数据垂直化成为关键策略。这一阶段,数据库系统根据业务特性进行垂直拆分,用户、商品和交易等数据被分离到各自的数据库中,降低了数据访问的复杂性,提升了系统响应速度。然而,这种架构并未解决所有问题,每个业务领域内部可能存在的问题仍需单独处理。
2010年双11大促带来的流量激增对数据库架构提出了新的挑战,推动了淘宝对数据库技术的进一步探索,包括对MySQL源代码的研究以及自主数据库Oceanbase的开发。Oceanbase是一款为大规模分布式环境设计的高性能、高可用的分布式数据库,旨在解决大数据量、高并发场景下的数据存储和处理问题。
淘宝电子商务网站的特点决定了其数据库架构的演变方向。高并发的访问需求、实时性要求、动态网页的特性以及读多写少的比例,都促使淘宝不断优化数据库架构,从单一数据库向服务中心化、数据垂直化的方向发展,以适应业务的快速变化和发展。在这个过程中,技术的创新和数据库管理策略的改进是关键,确保了淘宝能够处理海量数据并提供稳定的服务。
2012-11-13 上传
2018-09-30 上传
2012-06-11 上传
点击了解资源详情
点击了解资源详情
点击了解资源详情
点击了解资源详情
点击了解资源详情
点击了解资源详情
速本
- 粉丝: 20
- 资源: 2万+
最新资源
- adressimg:地址img将您的图像变成水彩肖像#img
- 积分兑换系统java源码-CS451-2020-project:CS451-2020-project
- sourcegraph-css-stacking-contexts:Sourcegraph扩展,突出显示引入新堆栈上下文CSS声明
- 行业文档-设计装置-一种利用高频诱导焊接技术粘接石头纸的方法.zip
- Android应用源码仿QQ分组列表修改版-IT计算机-毕业设计.zip
- chickenout:Chrome扩展程序可消除患有恐惧症的人的鸡的图像
- pdv_python_flask
- analise_dados_grafos:Unifor-MIA-Análisede Dados em Grafos
- ControlClientes:AplicaciónWeb para agregar客户端是基于JDBC,JSP和Servlet的完全基础的datos实用程序。
- react-boiler
- 任何数据库的数据库查看器和更新器
- disposable-hubs:集线器和统计模块(phpVms v7)
- VBA-challenge:与VBA硬件相关的文件的存储库
- 行业文档-设计装置-一种切纸机的导轨缓冲装置.zip
- 积分兑换系统java源码-fcmxmppserver:FCM的XMPP连接服务器
- TaskWork-java-1