/usr/local/spark$ ./bin/pyspark --conf spark.pyspark.python=/usr/bin/python 3.5.2 Error: pyspark does not support any application options.
时间: 2023-09-01 14:13:06 浏览: 210
这个错误提示是因为在运行`pyspark`命令时使用了`3.5.2`这个参数,而`pyspark`不支持任何应用程序选项。如果你想指定Python版本,可以通过设置`PYSPARK_PYTHON`环境变量来实现,例如:
```
export PYSPARK_PYTHON=/usr/bin/python3.6
./bin/pyspark
```
这样就会使用Python 3.6版本来运行`pyspark`。注意,`PYSPARK_PYTHON`的值应该是Python解释器的完整路径。
阅读全文