金山云独特之路:拒绝Hadoop,打造自有大数据技术

需积分: 10 6 下载量 174 浏览量 更新于2024-07-23 收藏 1.28MB PDF 举报
“金山云CTO杨钢在第四届中国云计算大会上分享了金山云如何从零开始构建大数据技术,拒绝采用主流的Hadoop,原因是Hadoop并不适合金山云的需求。他们经历了四个阶段的技术演进,旨在应对服务压力、提高服务稳定性和降低运营成本。金山云还开放了其快盘平台,提供了API供开发者使用。” 杨钢在演讲中提到,金山云在发展过程中并未选择Hadoop作为大数据解决方案,这是基于对自身业务需求的深入理解。Hadoop虽然在大数据处理领域广泛应用,但其设计和理念可能并不完全符合金山云的业务场景。金山云认为,技术的选择应该以实际业务需求为导向,而非盲目跟随潮流。 金山云的技术演进可以分为四个阶段: 1. 第一阶段:面对不断增长的服务压力,金山云快速迭代技术方案,优化服务稳定性。在这个阶段,他们致力于解决基础的性能和可靠性问题。 2. 第二阶段:为了保持业务的敏捷性并提供更大的服务能力,金山云完善了自动化运维系统,并开发了可重用的服务中间件。这一阶段的目标是提高效率,减少人工干预。 3. 第三阶段:为了降低服务运营的总成本(TCO),金山云开始考虑成本因素,进行了技术架构的调整,包括定制设备和IDC布局优化,利用云技术提高资源利用率。 4. 第四阶段:进入整体化技术架构阶段,金山云采用了高度定制的设备,自建IDC,并构建了一个专注云存储的开放平台。这一阶段强调的是整合和标准化,以实现更高效和灵活的运营。 金山云的快盘开放平台是其技术演进的一个重要成果。该平台提供了开放API,鼓励开发者进行应用开发,以拓展云存储服务的边界。开发者可以通过访问金山快盘的开放API官网获取SDK,参与开发者论坛的讨论,甚至可以直接向金山云寻求技术支持。这种开放策略不仅促进了金山云与合作伙伴之间的协作,也为第三方开发者提供了创新的平台。 通过这些举措,金山云展示了其在云计算和大数据领域的独特视角和战略选择,强调了业务需求与技术创新相结合的重要性。他们的发展路径对于其他寻求在大数据领域发展的企业来说,提供了一个另辟蹊径的思考角度。