ElasticSearch 定时删除3个月以上的索引

Elasticsearch 提供了一个功能叫做“生命周期管理”（Lifecycle Management），可以设置索引的生命周期策略，包括自动过期和删除。为了定期删除3个月以上的旧索引，你可以创建一个索引模板，配置它的`expire_after_days`属性。

以下是步骤：

1. 首先，登录到Elasticsearch的簇，并使用REST API或者Kibana的Dev Tools创建或更新索引模板：

PUT /_template/my_template
{
  "template": "*",
  "settings": {
    "index.lifecycle.name": "my_expiry_policy",  // 策略名称
    "index.lifecycle.expire_after": "3m"          // 删除索引后的天数，这里是3个月
  }
}

2. 上述配置表示所有新创建的索引都将遵循这个策略，`*`通配符代表所有索引。

3. 当一个索引的年龄超过3个月（按自然日计算），Elasticsearch会按照策略将其归档或删除（取决于你的配置）。注意，这不会立即删除索引数据，而是将它们移到一个不可搜索的状态，直到完全从缓存中清除。

相关问题

ElasticSearch-6.6.1定时删除3个月以上的索引

在Elasticsearch 6.6.1中，如果你想要设置一个策略定期删除超过三个月的索引，你可以通过`Index Lifecycle Policy (ILM)`来实现，因为这是从6.x开始引入的功能。以下是一个基本步骤：

1. 首先，你需要登录到Elasticsearch管理界面，通常是通过`http://localhost:9200/_ilm/policies`。

2. 创建一个新的ILM policy，例如：

PUT _ilm/policy/your_policy_name
{
  "policy": {
    "phases": {
      "warm": {
        "actions": {
          "expire": { "min_age": "3m", "max_age": "4w" }  // 删除索引的最小年龄为3个月，最大年龄可以设定为更长一些，防止误删
        },
        "throttle": {
          "interval": "5s",
          "max_docs": 100
        }
      },
      "delete": {   // 当索引达到最大年龄后进入此阶段
        "actions": { "delete": {} }
      }
    }
  }
}

这里，`min_age`指定了索引会被保留的最长时间，超过这个时间就会进入`delete`阶段并被删除。

3. 将新政策应用到所有索引，或者只对特定类型的索引应用：

POST _ilm/policy/_default/revert_to
{
  "policy_name": "your_policy_name"
}

或者针对特定类型：

POST _ilm/policy/_default/existing_types
{
  "types": ["your_index_type"],
  "policy_name": "your_policy_name"
}

注意，`_default`通常会覆盖所有的索引，除非明确指定类型或应用到某个单独的索引。

Elasticsearch定时清理过期索引

您好！对于Elasticsearch的定时清理过期索引，您可以使用Elasticsearch的Curator插件来实现。Curator是一个用于管理Elasticsearch索引的工具，可以方便地执行索引的删除、备份等操作。

以下是一些步骤可以用来设置定时清理过期索引的任务：

1. 安装Curator：您可以通过pip命令安装Curator：

pip install elasticsearch-curator

2. 创建配置文件：创建一个YAML格式的配置文件，用于定义索引清理任务。例如，创建一个名为`curator_config.yml`的文件，并添加以下内容：

---
# 连接Elasticsearch的信息
client:
  hosts:
    - 127.0.0.1
  port: 9200
  url_prefix:
  use_ssl: False
  certificate:
  client_cert:
  client_key:
  ssl_no_validate: False
  http_auth:
  timeout: 30
  master_only: False

# 清理任务配置
actions:
  1:
    action: delete_indices
    description: "Delete indices older than 30 days"
    filters:
      - filtertype: pattern
        kind: prefix
        value: your_index_prefix-
      - filtertype: age
        source: name
        direction: older
        timestring: '%Y.%m.%d'
        unit: days
        unit_count: 30

在上述配置中，`hosts`字段指定了Elasticsearch的地址和端口，`filters`字段定义了过滤器规则，这里以索引名的前缀和索引的创建时间进行过滤。

3. 创建定时任务：使用cron表达式来定义定时任务，可以在Linux系统的crontab中添加以下命令：

curator --config /path/to/curator_config.yml --dry-run

上述命令中的`--dry-run`参数用于测试运行，可以在实际运行之前先检查将要执行的操作。

4. 运行定时任务：如果测试运行没有问题，可以将上述命令添加到crontab中，并设置合适的执行频率。例如，每天凌晨执行一次：

0 0 * * * curator --config /path/to/curator_config.yml

通过以上步骤，您就可以设置定时清理过期索引的任务了。请确保对配置文件和定时任务的设置进行适当调整，以满足您的需求。希望对您有所帮助！如有任何问题，请随时提问。