什么是Flink流式计算,与Spark、Storm比较有哪些优劣势和侧重点

时间:2024-03-26 14:20:21

前言

今天分享一下,什么是Flink流式计算,与Spark、Storm比较有哪些优劣势和侧重点

什么是Flink

  • Flink是一个分布式计算引擎,支持流计算和批处理

  • Flink的优势

    1.和Hadoop相比, Flink使用内存进行计算, 速度明显更优

    2.和同样使用内存的Spark相比, Flink对于流的计算是实时的, 延迟更低,Spark并非真正的流式计算

    3.和同样使用实时流的Storm相比, Flink的吞吐量更大,提供了更优秀的API, 支持批量计算

  • 在单机上, Flink大概能达到35万条/秒的吞吐量, 这个数据大概是Storm得3-5倍

  • 在单机上, Flink消息处理的延迟大概在200毫秒左右, 这个数据大概是Storm的3-5倍

FLink和Spark对比:

什么是Flink流式计算,与Spark、Storm比较有哪些优劣势和侧重点

Flink的应用

Flink在很多公司的生产环境中得到了使用, 例如: ebay, 腾讯, 阿里, 亚马逊, 华为等

写在最后

flink最近一两年才流行起来,目前在一些超大型公司使用,一些中小企业的业务量,像Storm,Spark都能使用,具体看公司的实际情况进行技术选型。

如果觉得可以的,记得关注我哦