tokenizers与python版本的对应关系

`tokenizers` 模块支持 Python 3.6、3.7、3.8 和 3.9。如果你想要使用 `tokenizers` 模块，你需要确保你的 Python 版本符合要求。

具体来说，你需要在以下 Python 版本中安装 `tokenizers` 模块：

- Python 3.6 或更高版本
- Python 3.7 或更高版本
- Python 3.8 或更高版本
- Python 3.9 或更高版本

如果你使用的是旧版本的 Python（如 Python 2.x），你将无法安装和使用 `tokenizers` 模块。在这种情况下，你需要升级到支持 `tokenizers` 模块的 Python 版本。

总之，如果你想要使用 `tokenizers` 模块，你需要确保你的 Python 版本符合要求。