k8s安装spark集群

要在Kubernetes上安装Spark集群，你可以按照以下步骤进行操作：

1. 首先，创建Spark的命名空间：

   kubectl create ns spark

2. 接下来，创建Spark账户和配置角色：

   kubectl create serviceaccount spark -n spark
   kubectl create clusterrolebinding spark-role --clusterrole=edit --serviceaccount=spark:spark

3. 设定Spark的环境变量：

   export SPARK_HOME=/home/install/spark/spark-3.3.2-bin-hadoop3

4. 进入Spark的安装目录：

   cd $SPARK_HOME

5. 使用spark-submit命令提交任务到Kubernetes集群：

   ./bin/spark-submit \
     --master k8s://https://k8s-apiserver:6443 \
     --deploy-mode cluster \
     --name spark-pi \
     --class org.apache.spark.examples.SparkPi \
     --conf spark.executor.instances=5 \
     --conf spark.kubernetes.namespace=spark \
     --conf spark.eventLog.enabled=true \
     --conf spark.eventLog.dir=hdfs://192.168.113.131:8020/spark/eventLog \
     --conf spark.kubernetes.authenticate.driver.serviceAccountName=spark \
     --conf spark.kubernetes.container.image=apache/spark:v3.3.2 \
     hdfs://192.168.113.131:8020/spark/jar/spark-examples_2.12-3.3.2.jar

请注意，上述命令中的参数需要根据你的实际情况进行相应的修改。