特牛生活网

Spark on yarn和Hadoop on yarn的区别_spark yarn 还是hadoop yarn-CSDN博客

网友收藏
文章浏览阅读3.4k次。Apache Spark 的高性能一定程度上取决于它采用的异步并发模型(这里指server/driver 端采用的模型),这与 Hadoop 2.0(包括 YARN 和MapReduce)是一致的。Hadoop 2.0 自己实现了类似 Actor 的异步并发模型,实现方式是 epoll+状态机,而 Apache Spark 则直接采用了开源软件Akka,该软件实现了 Actor 模型,性能非常高。_spark yarn 还是hadoop yarn