spark-standalone模式怎么安装配置

1. 下载Spark安装包
首先，需要下载Spark的安装包。可以从Spark官网下载，也可以从Apache镜像站下载。

2. 解压安装包
将Spark安装包解压到某个目录下，例如/opt/spark。

3. 配置Spark环境变量
打开.bashrc文件，添加如下内容：

export SPARK_HOME=/opt/spark
export PATH=$SPARK_HOME/bin:$PATH

4. 配置Spark Standalone模式
在Spark安装目录下，进入conf目录，复制一份模板文件spark-env.sh.template，并将复制出来的文件重命名为spark-env.sh。

在spark-env.sh文件中设置以下变量：

export SPARK_MASTER_HOST=<master节点IP地址>
export SPARK_MASTER_PORT=<master节点端口，默认为7077>
export SPARK_MASTER_WEBUI_PORT=<master节点Web端口，默认为8080>
export SPARK_WORKER_CORES=<每个Worker节点的CPU核数，默认为1>
export SPARK_WORKER_MEMORY=<每个Worker节点的内存，默认为1g>
export SPARK_WORKER_INSTANCES=<Worker节点数量，默认为1>

5. 启动Spark Standalone集群
在Master节点上执行以下命令启动Spark Standalone集群：

$SPARK_HOME/sbin/start-master.sh

在Worker节点上执行以下命令启动Worker节点：

$SPARK_HOME/sbin/start-worker.sh spark://<master节点IP地址>:<master节点端口>

6. 访问Spark Web界面
在浏览器中访问Master节点的Web界面，地址为http://<master节点IP地址>:<master节点Web端口>，可以查看Spark集群的状态和任务情况。