spark on k8s

在Kubernetes上运行Spark需要执行一系列步骤。首先，您需要下载并解压Spark安装包。然后，您可以使用`spark-submit`命令提交应用程序到Kubernetes集群上运行。在提交应用程序时，您需要指定一些参数，例如master地址、部署模式、应用程序名称、主类等等。您还可以配置一些Spark的属性，如事件日志目录、容器镜像等等。

在您的引用中，给出了一个示例`spark-submit`命令的参数配置。这个示例命令将一个Spark Pi的示例应用程序提交到Kubernetes集群上运行。其中，`--master`参数指定Kubernetes集群的地址，`--deploy-mode`参数指定部署模式为cluster，`--name`参数指定应用程序名称为spark-pi，`--class`参数指定应用程序的主类为`org.apache.spark.examples.SparkPi`，`--conf`参数用于设置Spark的配置属性，例如启用事件日志、设置事件日志目录、设置容器镜像等等。最后，`local:///opt/spark/examples/jars/spark-examples_2.12-3.0.0.jar`指定要提交的应用程序的路径。

如果您想在Kubernetes上运行Spark，您需要确保已经安装了Kubernetes集群，并且已经正确配置了Spark的相关属性。另外，您还需要安装和配置CNI网络插件，以便Spark应用程序可以与Kubernetes集群中的其他组件进行通信。