flink和spark对比
发布于 2023-03-19 02:42:29
浏览 314
适用环境:
型号:联想AIO520C
系统:Windows10 专业版
详情:
1、
1.技术理念不同:Spark的技术理念是使用微批来模拟流的计算,基于Micro-batch,数据流以时间为单位被切分为一个个批次,通过分布式数据集RDD进行批量处理,是一种伪实时。
2、
2.时间机制:SparkStreaming只支持处理时间,使用processingtime来实现eventtime相关的业务。使用processingtime模拟eventtime必然会产生一些误差,特别是在产生数据堆积的时候,误差则更明显,甚至导致计算结果不可用。
上一篇:运算器的组成部分不包括
下一篇:ipad可以带上飞机吗