es中分词器使用的流程

在 Elasticsearch 中，分词器是用来将文本数据分解成单个的词语（token）的工具。分词器使用的流程如下：

1. 数据输入：将需要分析的文本数据输入到分词器中。

2. 字符过滤器：首先对输入数据进行字符过滤，将不需要的字符（如标点符号、HTML标签等）从文本中去除。

3. 分词器：将经过字符过滤的文本数据按照一定的规则进行分词，生成单个的词语（token）。

4. 词语过滤器：对于生成的词语进行过滤，例如去除停用词（the、a、an等），或者对词语进行同义词替换、词干提取等操作。

5. 输出：将经过分词和过滤器处理后的文本数据作为索引或查询的输入，用于搜索引擎的检索或分析。

需要注意的是，不同的分词器可能会有不同的规则和算法来进行分词和过滤，因此在使用分词器时需要根据具体的需求进行选择和配置。