特牛生活网

从Storm和Spark 学习流式实时分布式计算的设计-CSDN博客

网友收藏
文章浏览阅读287次。0. 背景最近我在做流式实时分布式计算系统的架构设计,而正好又要参加CSDN博文大赛的决赛。本来想就写Spark源码分析的文章吧。但是又想毕竟是决赛,要拿出一些自己的干货出来,仅仅是源码分析貌似分量不够。因此,我将最近一直在做的系统架构的思路整理出来,形成此文。为什么要参考Storm和Spark,因为没有参照效果可能不会太好,尤其是对于Storm和Spark由了解的同学来说,可能通过对比,更能..._请简述流式实时数据处理的特点。 (2)简述 spark 和 storm 为流式实时数据计算做了哪些优化和设计。