Spark学习

Spark - 学习概述

2020-06-30  本文已影响0人  VChao

2020/06/30 -
该部分记录将作为后续相应学习的重要参考,一部分技术或者原理在长时间不使用之后,必然会出现淡忘的结果,而我以前的学习方式就是反复的去重新学习,这种学习方式必然是非常低下的。所以这里就出现了这份记录。

这份记录主要从《Learning Spark》英文原版(2015年第一版)的内容入手,通过这本书来学习整个spark的脉络;因为已经有过原理的理解,也有过代码的实践,所以对于这部分内容将从书的内容和我自己的思考混合来进行阐述。同时,整体上的内容将按照这本书的目录来完成。


第一章,使用spark进行数据分析,引言;
第二章,下载spark并运行第一个例子
第三章,使用RDD进行编程
第四章,处理key/value形式数据
第五章,加载和保存文件
...
第八章,调优及调试spark应用
第十一章,Spark(MLlib)与机器学习


个人学习总结
spark中DataFrame的使用方法

上一篇 下一篇

猜你喜欢

热点阅读