CPM-Bee-5B微调实记
时间: 2023-08-14 07:12:09 浏览: 67
根据引用\[2\]中提供的信息,CPM-Bee-5B微调的步骤如下:
1. 打开终端并导航到CPM-Bee-5B模型的src文件夹。
2. 激活你的环境,例如使用命令"nlp"。
3. 准备数据集,将原始数据按照指定格式写入train.jsonl文件,并将一部分数据分离到eval.jsonl文件中。
4. 将数据转换为二进制形式,以便进行训练。
5. 修改finetune_cpm_bee.sh文件,根据需要设置训练的参数和路径。
6. 在终端中运行finetune_cpm_bee.sh文件,开始微调训练。
7. 等待训练完成,即可完成CPM-Bee-5B微调。
请注意,这只是一个大致的步骤概述,具体的操作细节可能会因环境和需求而有所不同。建议参考相关文档或指南以获取更详细的指导。
#### 引用[.reference_title]
- *1* *3* [开源大语言模型是否可以商用的调查报告](https://blog.csdn.net/engchina/article/details/131334546)[target="_blank" data-report-click={"spm":"1018.2226.3001.9630","extra":{"utm_source":"vip_chatgpt_common_search_pc_result","utm_medium":"distribute.pc_search_result.none-task-cask-2~all~insert_cask~default-1-null.142^v91^insert_down1,239^v3^insert_chatgpt"}} ] [.reference_item]
- *2* [CPM-Bee-5B微调实记](https://blog.csdn.net/weixin_43680622/article/details/131940038)[target="_blank" data-report-click={"spm":"1018.2226.3001.9630","extra":{"utm_source":"vip_chatgpt_common_search_pc_result","utm_medium":"distribute.pc_search_result.none-task-cask-2~all~insert_cask~default-1-null.142^v91^insert_down1,239^v3^insert_chatgpt"}} ] [.reference_item]
[ .reference_list ]