Spark - 学习概述
2020-06-30 本文已影响0人
VChao
2020/06/30 -
该部分记录将作为后续相应学习的重要参考,一部分技术或者原理在长时间不使用之后,必然会出现淡忘的结果,而我以前的学习方式就是反复的去重新学习,这种学习方式必然是非常低下的。所以这里就出现了这份记录。
这份记录主要从《Learning Spark》英文原版(2015年第一版)的内容入手,通过这本书来学习整个spark的脉络;因为已经有过原理的理解,也有过代码的实践,所以对于这部分内容将从书的内容和我自己的思考混合来进行阐述。同时,整体上的内容将按照这本书的目录来完成。
第一章,使用spark进行数据分析,引言;
第二章,下载spark并运行第一个例子
第三章,使用RDD进行编程
第四章,处理key/value形式数据、
第五章,加载和保存文件
...
第八章,调优及调试spark应用
第十一章,Spark(MLlib)与机器学习