Delta Lake与实时计算(19)

Delta Lake与实时计算(19),第1张

Delta Lake与实时计算(19) Delta Lake与实时计算

前面我们已经花了大量的篇幅在介绍Delta Lake,而且我们介绍了多种场景中去使用Delta Lake,你可以参考下面的文章

  1. Spark SQL Scala版 使用 Delta Lake
  2. Spark SQL Shell 版 使用Delta Lake
  3. Spark SQL SQL 版 使用 Delta Lake
  4. Spark SQL Python版 使用 Delta Lake
  5. Spark Streaming 使用 Delta Lake

今天我们来看一下Delta Lake 对于实时计算意味着什么,其实如果你前面学习的足够仔细的话,你应该知道我们说过了Delta Lake可以统一的批处理和流处理,今天我们就具体看一下这个是什么意思

经典的lambda 架构

随着我们对数据的实时性的要求越来越高,我们在传统架构的基础上添加了批处理层,形成了经典的lambda 架构,更多关于lambda架构可以参考:

欢迎分享,转载请注明来源:内存溢出

原文地址: http://outofmemory.cn/zaji/5678694.html

(0)
打赏 微信扫一扫 微信扫一扫 支付宝扫一扫 支付宝扫一扫
上一篇 2022-12-17
下一篇 2022-12-17

发表评论

登录后才能评论

评论列表(0条)

保存