Name		Name	Last commit message	Last commit date
parent directory ..
.ipynb_checkpoints		.ipynb_checkpoints
tests		tests
README.md		README.md
config.json		config.json
converting-gpt-to-llama2.ipynb		converting-gpt-to-llama2.ipynb
converting-llama2-to-llama3.ipynb		converting-llama2-to-llama3.ipynb
previous_chapters.py		previous_chapters.py
requirements-extra.txt		requirements-extra.txt
standalone-llama32.ipynb		standalone-llama32.ipynb

README.md

从 GPT 转换为 Llama（Converting GPT to Llama）

本目录包含代码示例，演示如何 将第 4 章和第 5 章的 GPT 实现转换为 Meta AI 的 Llama 体系结构。推荐按照以下顺序阅读：

converting-gpt-to-llama2.ipynb：
逐步将 GPT 转换为 Llama 2 7B，并加载 Meta AI 预训练权重。
converting-llama2-to-llama3.ipynb：
讲解如何将 Llama 2 迁移至 Llama 3，并支持 Llama 3.1 和 Llama 3.2 版本。
standalone-llama32.ipynb：
Llama 3.2 的独立实现，提供完整的代码示例。