文章浏览阅读441次。一、大数据实时计算框架1、什么是实时计算?流式计算? 举例:自来水厂处理自来水(特点:持续性、流式计算))2、对比:离线计算和流式计算 (*)离线计算:MapReduce和Spark Core, 数据的批量处理(Sqoop-......
admin
文章浏览阅读4k次。本文的列子来自http://blog.csdn.net/zfszhangyuan/article/details/52522974,部分内容做了相应的修改和添加首先我们要做一个日志生产器,方便本地模拟线上环境:直接上代码吧(原理是根据一个原始日志log,然后随机的......
admin
文章浏览阅读287次。0. 背景最近我在做流式实时分布式计算系统的架构设计,而正好又要参加CSDN博文大赛的决赛。本来想就写Spark源码分析的文章吧。但是又想毕竟是决赛,要拿出一些自己的干货出来,仅仅是源码分析貌似分量......
admin
友情链接申请要求: 不违法不降权 权重相当 请联系QQ:737597453