alluxio定时清理缓存的配置
时间: 2024-05-10 10:15:57 浏览: 13
Alluxio 是一个分布式文件系统,可以将数据存储在内存和磁盘中。为了优化性能,Alluxio 在内存中缓存热数据。但是,如果缓存空间不足,需要定期清理缓存。下面是 Alluxio 定时清理缓存的配置:
1. 打开 Alluxio 配置文件 alluxio-site.properties。
2. 在文件末尾添加以下属性:
```
alluxio.worker.tieredstore.levelX.watermark.high.ratio=0.9
alluxio.worker.tieredstore.levelX.watermark.low.ratio=0.7
alluxio.worker.tieredstore.levelX.watermark.step.ratio=0.1
alluxio.worker.tieredstore.levelX.watermark.free.space.min=1073741824
alluxio.worker.tieredstore.levelX.watermark.time.ms=60000
```
其中,levelX 是 Alluxio 存储层级的编号,可以是 0、1、2 等。这些属性指定了 Alluxio 缓存清理的规则:
- watermark.high.ratio:当某个存储层级的使用率达到该值时,Alluxio 开始清理缓存。此处设置为 0.9,即当使用率达到 90% 时开始清理。
- watermark.low.ratio:当某个存储层级的使用率降至该值以下时,Alluxio 停止清理缓存。此处设置为 0.7,即当使用率降至 70% 以下时停止清理。
- watermark.step.ratio:每次清理时,Alluxio 会清理到 watermark.low.ratio 以下。此处设置为 0.1,即每次清理会清理 10%。
- watermark.free.space.min:每个存储层级至少要保留的空间大小,单位为字节。此处设置为 1GB。
- watermark.time.ms:清理操作的时间间隔,单位为毫秒。此处设置为 60秒。
3. 根据实际需求修改以上属性值。
4. 保存并关闭文件。
5. 重启 Alluxio 服务使配置生效。
以上就是 Alluxio 定时清理缓存的配置方法。
相关推荐
![pdf](https://img-home.csdnimg.cn/images/20210720083512.png)
![zip](https://img-home.csdnimg.cn/images/20210720083736.png)
![](https://csdnimg.cn/download_wenku/file_type_ask_c1.png)
![](https://csdnimg.cn/download_wenku/file_type_ask_c1.png)
![](https://csdnimg.cn/download_wenku/file_type_ask_c1.png)
![](https://csdnimg.cn/download_wenku/file_type_ask_c1.png)
![](https://csdnimg.cn/download_wenku/file_type_ask_c1.png)
![](https://csdnimg.cn/download_wenku/file_type_ask_c1.png)
![](https://csdnimg.cn/download_wenku/file_type_ask_c1.png)
![](https://csdnimg.cn/download_wenku/file_type_ask_c1.png)
![](https://csdnimg.cn/download_wenku/file_type_ask_c1.png)
![](https://csdnimg.cn/download_wenku/file_type_ask_c1.png)
![](https://csdnimg.cn/download_wenku/file_type_ask_c1.png)
![](https://csdnimg.cn/download_wenku/file_type_ask_c1.png)
![](https://csdnimg.cn/download_wenku/file_type_ask_c1.png)
![](https://csdnimg.cn/download_wenku/file_type_ask_c1.png)
![](https://csdnimg.cn/download_wenku/file_type_ask_c1.png)