1 下載安裝

官網(wǎng)下載

選擇版本和type,，這里為 spark-2.4.4-bin-without-hadoop.tgz

1.1 命令下載：

1.2 解壓重命名：

1.3 配置環(huán)境變量：

使用vim編輯~/.bashrc文件，加入以下配置(目錄換成自己的安裝目錄）：

使用source命令使配置生效：source ~/.bashrc

可以使用echo $PATH 輸出查看是否正確

 2 簡單配置

2.1 安裝scala并配置環(huán)境變量：

2.2 配置spark-env.sh：

位置：$SPARK_HOME/conf/spark-env.sh.template

命令：

配置：

2.3 配置slaves：

文件位置：$SPARK_HOME/conf/slaves.template

命令：

配置：

2.4 執(zhí)行示例程序：

在 $SPARK_HOME/examples/src/main 目錄下有一些 Spark 的示例程序,，有 Scala、Java,、Python,、R 等語言的版本。我們可以先運行一個示例程序 SparkPi（即計算 π 的近似值）,，執(zhí)行如下命令：

注：執(zhí)行時會輸出非常多的運行信息,，輸出結(jié)果不容易找到，可以通過 grep 命令進行過濾（命令中的 2>&1 可以將所有的信息都輸出到 stdout 中,，否則由于輸出日志的性質(zhì),，還是會輸出到屏幕中）

2.5 執(zhí)行示例程序：

 Tips：常見錯誤

https://www.cnblogs.com/qifengle-2446/p/6424377.html