流计算的数据处理引擎包括哪些? AHadoop、Hive、Pig BFlink、Spark Streaming、Storm C以上都不是 DMySQL、Oracle、SQL Server
时间: 2023-09-24 18:03:09 浏览: 240
大数据框架对比:Hadoop、Storm、Samza、Spark和Flink
B Flink、Spark Streaming、Storm是流计算的数据处理引擎。这三个引擎都是基于流式数据处理的,具有高吞吐、低延迟、容错性强等特点。其中,Flink被认为是目前最先进的流计算引擎之一,支持事件时间和处理时间的语义,提供了丰富的API和库,支持多种计算模型;Spark Streaming则是在Spark框架上扩展而来,提供了类似于批处理的API,易于使用;Storm是最早的流计算引擎之一,具有实时性好、可扩展性强等特点,但API和开发难度相对较高。
阅读全文