大模型技术入门与深度解读
5星 · 超过95%的资源 需积分: 1 45 浏览量
更新于2024-10-27
收藏 1.57MB ZIP 举报
资源摘要信息:"大模型入门学习笔记.zip"
标题: "大模型入门学习笔记.zip"
描述: "大模型入门学习笔记.zip
大模型入门学习(主要基于DataWhale组织的学习任务)
## Task 01
梳理了语言模型的进化史。
知识点:
- 语言模型的发展历史
- 早期语言模型的特点
- 现代语言模型的演进
## Task 02
这一节主要是讲述大模型的能力,通过一些任务来探索,这里我整理了prompt的范式,包括一个范例,另外整理了langchain介绍,包括一些langchain示例。
知识点:
- 大模型的能力分析
- 如何通过任务探索大模型
- Prompt范式的理解与应用
- LangChain框架的介绍和示例
## Task 03
这一部分主要整理了ChatGPT的原理,包括ChatGPT训练的三个阶段,目前这部分仅是简单叙述,接下来会对具体的技术细节进行总结。
知识点:
- ChatGPT的工作原理
- ChatGPT训练的三个阶段:预训练、指令微调、奖励模型
- 大模型训练的技术细节
## Task 04
这一部分主要梳理了GPT的进化史,从GPT-1到GPT-3,从数据、模型、训练方式有了一个大致的了解。
知识点:
- GPT系列模型的发展历程
- GPT系列模型在数据处理、模型设计、训练方式上的变化
## Task 05
这一部分整理了ChatGPT从零开始的训练流程,主要包括预训练、指令微调、奖励模型三个阶段。
知识点:
- ChatGPT从零开始的训练流程
- 预训练、指令微调、奖励模型的具体步骤和方法"
标签: "语言模型 范文/模板/素材 大模型学习"
压缩包子文件的文件名称列表:
- 介绍.md
- Task05 从零开始训练大模型
- Task02 大模型能力
- Task03 ChatGPT技术原理
- Task04 GPT家族
- Task01引言
以上内容为大模型入门学习笔记的详细知识点概述。
2024-02-22 上传
139 浏览量
135 浏览量
2024-02-22 上传
415 浏览量
2024-02-22 上传
2020-08-06 上传
2021-11-02 上传
173 浏览量
.whl
- 粉丝: 3940
- 资源: 4861
最新资源
- 吃豆人3000
- CC107_Sat7301230Group8
- aabbbb_ctdl_
- 易语言-易语言读取系统cookies目录
- KnpMenu:PHP的菜单库
- C#实现获取本地电脑硬件信息工程项目
- aramacademy:ARAM学院是英雄联盟(AOL)的首要ARAM独家统计跟踪网站
- AquaDataStudio7中文免安装版
- Graphics:是用于OpenGL的小型2D渲染库
- iss_spotter-
- sweyer:使用Flutter构建的音乐播放器
- zookeeper-3.4.9
- 易语言-易语言实现大文件加密
- 毕业设计+wumpus世界+python的三种实现方式
- v2ex:热帖收藏夹,V2EX 数据从15年4月份开始收集,HN 从 2020-08-27 开始
- SyncMarks-Extension:Firefox,Edge或Chromium衍生产品的浏览器Web扩展,可将书签与私有后端同步