这是一门免费课程,帮助学习者从数学和 Python 基础出发,逐步学会构建、训练和部署大语言模型。课程分为三部分:可选的基础知识、面向模型构建的 LLM Scientist,以及面向应用开发与部署的 LLM Engineer。
Scientist 部分涵盖模型架构、预训练、监督微调、偏好对齐、评估和量化。Engineer 部分涵盖模型运行、向量存储、检索增强生成、智能体、推理优化、部署和安全。各主题链接到 Colab 笔记本和作者撰写的文章,仓库还列出了评估、模型合并等工具类笔记本。
这是一门免费课程,帮助学习者从数学和 Python 基础出发,逐步学会构建、训练和部署大语言模型。课程分为三部分:可选的基础知识、面向模型构建的 LLM Scientist,以及面向应用开发与部署的 LLM Engineer。
Scientist 部分涵盖模型架构、预训练、监督微调、偏好对齐、评估和量化。Engineer 部分涵盖模型运行、向量存储、检索增强生成、智能体、推理优化、部署和安全。各主题链接到 Colab 笔记本和作者撰写的文章,仓库还列出了评估、模型合并等工具类笔记本。