python dask使用dask.config.set设置最大进程数量不生效?
时间: 2023-06-07 19:11:04 浏览: 197
可能是因为您没有正确配置Dask的调度器。您可以通过以下方式进行配置:
1. 使用本地调度器:
```python
from dask.distributed import Client, LocalCluster
cluster = LocalCluster(n_workers=4, threads_per_worker=1)
client = Client(cluster)
```
2. 使用分布式调度器:
```python
from dask.distributed import Client
from dask_kubernetes import KubeCluster
cluster = KubeCluster(n_workers=4, threads_per_worker=1)
client = Client(cluster)
```
请注意,您需要在设置Dask的进程数量之前实例化Dask的调度器。否则,设置最大进程数的配置将会被忽略。
阅读全文