分布式计算框架Spark
2020-08-01 本文已影响0人
神豪VS勇士赢
分布式计算框架Spark是什么
分布式计算框架Spark是什么?
快速的分布式计算框架
官网Spark 和 MapReduce的对比
计算速度:
![](https://img.haomeiwen.com/i6217104/ee7f5992bafdd03e.png)
更容易编写计算代码:
提供了运行命令行更容易使用:
![](https://img.haomeiwen.com/i6217104/4084290e4ed552d2.png)
更容易拓展:
![](https://img.haomeiwen.com/i6217104/b5f0746b70e2ed83.png)
可运行在多平台框架:
![](https://img.haomeiwen.com/i6217104/26ed42b9d758c67b.png)
计算对比图:
![](https://img.haomeiwen.com/i6217104/87fff5488dd80db6.png)
分布式 计算框架Spark开发语言
![](https://img.haomeiwen.com/i6217104/001801e149943989.png)
Spark运行模式
本地测试机器 用local 模式
生产环境用 Yarn 模式
![](https://img.haomeiwen.com/i6217104/aa9dc57c28094358.png)
分布式计算框架Spark是什么?
快速的分布式计算框架
计算速度:
更容易编写计算代码:
提供了运行命令行更容易使用:
更容易拓展:
可运行在多平台框架:
本地测试机器 用local 模式
生产环境用 Yarn 模式