华为OceanStor 9000:大数据存储系统详解与技术优势

4星 · 超过85%的资源 需积分: 50 37 下载量 19 浏览量 更新于2024-07-19 收藏 1.29MB PDF 举报
华为OceanStor 9000大数据存储系统技术白皮书是一份详细的文档,由华为技术有限公司于2015年6月27日发布,旨在介绍其在大数据存储领域的创新解决方案。该系统主要针对大数据处理的需求,提供了高效、可扩展的存储架构和功能。 1. 产品逻辑结构:文档详细阐述了OceanStor 9000的逻辑结构,包括存储系统的核心组件,如产品逻辑层面的组成,如分布式文件系统OceanStor DFS,它作为数据存储和管理的基础,能够支持海量数据的高效读写和共享。 2. OceanStor DFS分布式文件系统:这是关键部分,介绍了其技术背景,强调了系统如何通过分布式设计提供高可用性和容错性。技术原理涉及数据分布、负载均衡和数据冗余策略,确保数据的持久性和一致性。技术特点则涵盖了大数据场景下的性能优化和数据访问效率提升。 3. 存储硬盘与交换设备:白皮书还讨论了存储硬件的选择和配置,以及如何通过交换设备实现数据传输的高效。这包括硬盘的类型、RAID配置以及网络设备在数据路径中的作用。 4. 管理子系统:系统管理是不可忽视的一环,文档解释了管理子系统的功能,如监控、配置、维护和故障恢复,这对于保证系统的稳定运行至关重要。 5. 组网及环境要求:白皮书针对不同类型的网络环境,如10GE和InfiniBand(IB)组网,提供了详细的部署指南。前端和后端网络的配置对于系统的性能和可靠性有着直接影响。 6. 软件特性:文档深入剖析了OceanStor 9000的软件特性,如OceanStor DFS的客户价值,不仅在于其技术优势,还体现在如何帮助企业降低成本,提高数据分析能力,以及在大数据时代的竞争力。 7. 分布式数据可靠技术:这部分着重介绍了系统如何通过分布式数据可靠技术来保障数据安全,包括技术背景、实现原理以及带来的技术特点,如数据备份、数据恢复和数据一致性保障。 华为OceanStor 9000大数据存储系统技术白皮书提供了全面的技术解读,帮助用户理解该系统如何适应大数据时代的需求,优化存储性能,同时确保数据的完整性和安全性。通过这份白皮书,用户可以了解到如何充分利用这一解决方案,以支持其大数据业务的发展。
2009-06-12 上传
第1章 网络存储主要技术 7 1.1 概述 7 1.2 DAS:直接附加存储 7 1.3 SAN:存储区域网络 8 1.3.1 什么是SAN? 8 1.3.2 SAN的误区 9 1.3.3 SAN的组成 9 1.3.4 FC SAN的问题 9 1.3.5 IP SAN 10 1.4 NAS:网络附加存储 12 1.5 SAN和NAS 13 第2章 主要协议和相关技术 14 2.1 SCSI 14 2.2 FC(光纤通道) 14 2.3 iSCSI 16 2.4 iSCSI与光纤通道的比较 17 第3章 文件系统相关知识 19 3.1 什么是文件系统 19 3.2 主流文件系统和特点 20 3.3 NFS和CIFS网络文件系统工作原理和特点 24 3.4 存储系统与文件系统的关系 25 第4章 RAID技术 26 4.1 RAID概述 26 4.2 RAID级别 26 4.2.1 RAID0 26 4.2.2 RAID1 27 4.2.3 RAID2 28 4.2.4 RAID3 28 4.2.5 RAID4 29 4.2.6 RAID5 29 4.2.7 RAID6 30 4.2.8 RAID10 31 4.2.9 RAID01 32 4.2.10 JBOD 32 4.3 不同RAID级别对比 33 第5章 主机系统高可用技术 36 5.1 概述 36 5.1.1 双机热备份方式 37 5.1.2 双机互备份方式 41 5.1.3 群集并发存取方式 43 5.2 工作模式 45 5.2.1 双机热备份方式 45 5.2.2 双机互备方式 45 5.2.3 群集并发存取方式 45 5.3 适用场合 46 5.4 对存储系统的要求 46 第6章 数据一致性 48 6.1 数据一致性概述 48 6.2 Cache引起的数据一致性问题 48 6.3 时间不同步引起的数据一致性问题 49 6.4 文件共享中的数据一致性问题 50 第7章 数据复制与容灾 51 7.1 灾难恢复/业务连续性 51 7.2 数据备份系统 54 7.2.1 数据备份 54 7.2.2 数据复制 56 7.3 数据一致性 59 7.4 总结 60 第8章 备份技术 61 8.1 什么是备份 61 8.2 备份与拷贝、归档的区别 61 8.3 常规备份的实现方式 62 8.4 LAN Free和Serverless备份 63 8.5 主流备份软件和介质 64 8.6 备份技术新趋势 68 第9章 存储连接设备 71 9.1 HBA卡介绍 71 9.1.1 FC HBA相关知识: 71 9.1.2 主要HBA卡厂商 72 9.1.3 iSCSI HBA相关知识: 72 9.1.4 iSCSI HBA和TOE网卡主要厂商 73 9.2 FC连接设备介绍 73 9.2.1 FC HUB相关知识: 73 9.2.2 FC Switch相关知识: 73 9.2.3 FC Director相关知识: 73 9.2.4 iSCSI-FC存储路由器 74 9.2.5 FC Switch和FC Director主要厂商 74 第10章 信息生命周期 74 10.1 什么是信息生命周期 74 10.2 信息生命周期的实现 75 10.3 实现ILM的技术保障和面临的挑战 75 10.4 信息生命周期管理现状 76 10.5 法规遵从与信息生命周期管理 76 10.6 与信息生命周期相关的存储技术 77 10.6.1 固定内容管理: 77 10.6.2 WORM: 77 10.7 怎样看待信息生命周期管理 77 第11章 其他存储技术及标准 78 11.1 SMI-S 78 11.2 CDP(持续数据保护) 79 11.3 虚拟存储 79 11.4 网格计算 80 11.5 高性能计算 80 11.6 负载均衡 80 第12章 常见主机及操作系统 81 12.1 主机架构及操作系统概述 81 12.1.1 主机架构 81 12.1.2 操作系统 81 12.1.3 操作系统比较 82 12.2 常见主机厂商及常见产品介绍 82 12.2.1 IBM: 82 12.2.2 SUN: 83 12.2.3 Fujitsu: 84 12.2.4 HP: 84 12.3 操作系统应用特点 85 第13章 常见数据库及应用系统 86 13.1 数据库厂商介绍 86 13.1.1 Oracle 86 13.1.2 DB2 91 13.1.3 Sybase 94 13.1.4 MS SQL Server 95