transformer预训练模型下载

### 如何下载 Transformer 预训练模型

对于希望使用 PaddleNLP 下载并加载 Transformer 预训练模型的情况，可以通过 `AutoModel` 和 `AutoTokenizer` 类来简化这一过程。这两个类提供了一个统一的接口，使得即使不明确知道具体模型架构也能顺利加载预训练权重。

#### 使用 PaddleNLP 加载预训练模型实例

下面是一个具体的 Python 代码片段展示如何利用 PaddleNLP 来获取一个预训练好的 Transformer 模型及其分词器：

from paddlenlp.transformers import AutoModel, AutoTokenizer

model_name = "ernie-1.0"  # 这里可以选择不同的预训练模型名称
tokenizer = AutoTokenizer.from_pretrained(model_name)  # 创建分词器对象
model = AutoModel.from_pretrained(model_name)          # 初始化模型对象

这段代码展示了怎样通过指定想要使用的预训练模型的名字（在这个例子中是 ERNIE），并通过调用 `.from_pretrained()` 方法分别创建了相应的分词器 (`AutoTokenizer`) 和模型 (`AutoModel`) 实例[^1]。

除了 PaddleNLP 提供的功能外，在 NLP 中还有多个其他流行的库支持 Transformer 预训练模型的操作，比如 Hugging Face 的 Transformers 库也允许用户非常便捷地访问大量高质量的预训练模型以及配套资源[^2]。