阿里云实时计算Flink版:国产自主,性能领先

0 下载量 186 浏览量 更新于2024-06-17 收藏 6.69MB PDF 举报
阿里云实时计算Flink版是一款由阿里云推出的实时计算产品,该产品起源于2016年,在搜索推荐场景中崭露头角。随着时间的推移,它逐渐成为阿里集团的核心业务支撑,特别是在2017年双11期间,通过实时推荐功能显著提升了GMV(总交易额)。随着产品的发展,它不仅在集团内部实现了平台化服务,还逐步走向外部,成为阿里巴巴云对外的产品,并带动了Flink技术在中国和亚洲的普及。 2020年,Flink在全球范围内得到了广泛认可,成为实时计算领域的事实标准,包括主流IT公司和云厂商纷纷采用或推出Flink产品。阿里云在这个过程中发挥了重要作用,收购了Flink的创始公司Ververica,进一步巩固了其在全球Flink社区的地位,组建了全球最强的Flink团队。 阿里云实时计算Flink版在2021年开始主导社区发展,强调了国产自主可控性,成为唯一进入Forrester象限的中国实时流计算产品,并通过中国信通院的性能和稳定性评测。它提供了超过100项核心能力,涵盖了10个以上的Flink生态项目,以及大量的Committer和Project Management Committee (PMC)成员,体现了企业级的丰富能力。 产品的关键特性包括性能强劲,开放性强,支持全托管弹性,具备作业智能诊断和自动调优功能,能够快速响应常见问题并提供智能化解决方案。此外,它具有全面的监控告警系统,丰富的指标和维度聚合,以及数十种Connector以支持无缝的数据接入和流转。作业自动调优功能可以根据业务需求动态调整资源,实现按需付费,展现出高度的灵活性。 在场景应用上,阿里云实时计算Flink版提供了动态事件处理(CEP)用于实时风控和营销,以及Flink CDC(Change Data Capture)来提升数据实时入湖入仓效率。在内核和状态存储方面,经过优化,产品达到了每秒处理数十万记录的高性能,Nexmark测试显示性能相较于开源版本提升200%以上,并且采用了企业级状态存储后端和原生快照格式,确保了状态管理的高效和稳定。 阿里云实时计算Flink版凭借其强大的技术实力、丰富的应用场景和企业级的保障,已经成为实时计算领域的领导者,为企业提供了高效、稳定和智能的实时数据分析解决方案。
2024-11-29 上传
2024-11-29 上传