阿里云MaxCompute在BigBench测试中的突破:首个100TB与7000+ QPM记录

需积分: 0 0 下载量 111 浏览量 更新于2024-09-06 收藏 3.44MB PDF 举报
阿里云技术专家路璐在2017年的杭州云栖大会上分享了《MaxCompute基于BigBench标准的最新测试进展》的报告。MaxCompute是阿里云提供的云端大数据处理平台,此次报告聚焦于MaxCompute 2.0版本在BigBench标准下的性能评估和测试。BigBench是由英特尔主导的业内领先的应用级大数据分析基准测试,旨在衡量系统在处理端到端大数据工作负载时的性能、成本效率和服务水平协议(SLA)。 MaxCompute在最新的测试中取得了显著成果,它是首个在公共云服务上通过100TB大规模测试的引擎,这标志着其在处理海量数据的能力上实现了突破。该引擎的性能得分达到了业界领先的7830 QPM(每分钟查询处理数),证明了其在SQL、MapReduce、机器学习和流处理等多种任务类型上的高效执行能力。TPCx-BB基准测试涵盖了数据源的多样性,包括结构化、半结构化和非结构化数据,以及各种分析技术,如静态分析、数据挖掘和报告生成等。 MaxCompute 2.0的性能亮点体现在10TB数据规模下达到了1491.23 BBQpm(BigBench Query Per Minute)的指标,这体现了其在处理大规模数据时的高吞吐量。在价格效率方面,它提供了预付费包1个月、按需后付费以及3年预付费的价格选项,其中1月预付费的价格为$12.3/QPM,显示出其对不同用户需求的灵活性。在性价比方面,MaxCompute 2.0以$589/Price/BBQpm的价格提供了当前最佳的整体价值。 此外,报告还详细列出了不同类型的查询任务,如纯SQL查询、机器学习、OpenNLP等,以及输入数据类型和处理模型的多样性,展示了MaxCompute在不同类型工作负载中的全面适应性。这些测试结果表明MaxCompute 2.0在大数据处理领域的领先地位,不仅在性能上表现出色,而且在满足企业级SLA和降低TCO(总拥有成本)方面也具备显著优势。 总结来说,这次分享揭示了MaxCompute在大数据处理领域取得的重要里程碑,不仅在技术实力上走在前列,还通过BigBench标准验证了其在实际业务场景中的可靠性和效率。这对于寻求云端大数据解决方案的企业和开发者来说,是一个值得关注的重要发展动态。