README.md

第二章：处理文本数据

 

章节主要代码

• 01_main-chapter-code 包含了章节的主要代码和习题解答。

 

额外材料

• 02_bonus_bytepair-encoder 包含了可选的代码，用于基准测试不同的字节对编码实现。

• 03_bonus_embedding-vs-matmul 包含了可选（额外）代码，用于解释嵌入层和应用于独热编码向量的全连接层是等效的。

• 04_bonus_dataloader-intuition 包含了可选（额外）代码，用更直观的简单数字而非文本来解释数据加载器。