【Spark学习笔记】Mac环境下的Spark安装

2019-07-23 本文已影响0人不可能打工

安装Spark

官网下载安装包http://spark.apache.org/downloads.html

选择自己合适的版本下载

image.png

解压到指定的目录

tar -xzf spark-2.3.1-bin-hadoop2.7.tgz

配置环境变量（Mac是 ~/.bash_profile）

export SPARK_HOME=/Users/liubowen/Downloads/spark-2.3.1-bin-hadoop2.7
export PATH= ${PATH}:$ {SPARK_HOME}/bin

source ~/.bash_profile

打开mac远程登录设置

系统偏好设置 => 共享 => 远程登录

image.png

启动
进入spark安装目录下sbin

./start-all.sh

jps查看有两个进程进程

Master
Worker

image.png

安装成功