zavier / blogs-comments

博客评论
0 stars 0 forks source link

流计算-Flink笔记 | 编码之路 #22

Open zavier opened 4 years ago

zavier commented 4 years ago

https://zhengw-tech.com/2019/11/19/streaming-flink/

一种被设计来处理无穷数据集的数据处理系统引擎 对实时产生的数据进行实时统计分析 电商大促时,统计当前下单量、金额 实时统计 App 中的埋点数据等 流计算相比批处理需要切分为窗口才能进行分组聚合处理 同时需要解决如下两个问题 正确性/完整性 exactly-once 处理无序、延迟数据的能力 Flink对流计算提供的支持 同时支持高吞吐、低延迟、高性能(spark支持高吞吐和高性能