spark maven配置
时间: 2023-11-08 20:06:05 浏览: 103
maven的配置
在使用 Maven 构建 Spark 项目时,需要在 pom.xml 文件中添加以下依赖:
```xml
<dependencies>
<dependency>
<groupId>org.apache.spark</groupId>
<artifactId>spark-core_2.11</artifactId>
<version>2.4.5</version>
</dependency>
<dependency>
<groupId>org.apache.spark</groupId>
<artifactId>spark-sql_2.11</artifactId>
<version>2.4.5</version>
</dependency>
</dependencies>
```
其中,`spark-core` 是 Spark 的核心库,`spark-sql` 是 Spark SQL 库。需要根据实际需求添加其他依赖。
阅读全文