findspark用法
2021-06-16 本文已影响0人
bigdata张凯翔
配置pyspark和jupyter一起使用
https://jimolonely.github.io/2018/01/05/spark/04-pyspark-jupyter/
jupyter中运行pyspark
https://www.jianshu.com/p/d8854bd2ac97
import findspark
findspark.init()
使用findSpark包在代码中提供Spark Context。
使用findspark库自动识别spark依赖包
https://blog.csdn.net/syani/article/details/72851425
window下jupyter(anaconda)中使用findspark配置spark
https://blog.csdn.net/u010720408/article/details/95016658
而findspark可以提供简便的初始化spark环境,后续直接使用pyspark即可。
https://cloud.tencent.com/developer/article/1673833
使用findSpark包在代码中提供Spark Context。
findSpark包不是特定于Jupyter Notebook,
下面这篇说的很靠谱
http://yueshi.me/?p=328