Spark数据分析导论

spark快速大数据分析-第一章节

记录第一章节讲解内容

Spark是什么❓

1. spark 是一个用来实现快速而通用的集群计算的平台。
2. Spark能够在内存中进行计算.
3. 提供丰富的语言接口，包括：Python、Java、Scala
4. Spark可以运行在Hadoop集群上。

​

Spark软件栈

Spark 项目包含多个紧密集成的组件 。Spark 的核心是一个对由很多计算任务组成的、运行在多个工作机器或者是一个计算集群上的应用进行调度、 分发以及监控的计算引擎。

由于Spark 的核心引擎有着速度快和通用的特点 ，Spark 还支持为各种不同应用场景专门设计的高级组件 ，比如

SQL 和机器学习等 。