Apache Spark大数据计算框架的概念、原理与架构

[视频作者] 猩球科技

[视频时长] 3:55

[视频类型] 社科·法律·心理

Apache Spark是现在主流的大数据计算框架，相比Hadoop的MapReduce有将近百倍的性能提升。本视频为大家介绍Spark的基本概念，Application，Job，Stage，Task；系统运行架构，Driver，Master/Cluster Manager，Worker，Executor；以及RDD弹性分布式数据集；最后还介绍了action，stage以及shuffle的概念。