LLM 工程路线图：从概念理解到可运行系统

真正的学习不是看懂名词，而是把关键部件做出来

项目 1-2：Tokenizer、词表与 Embedding

模型看见世界之前，先由 tokenizer 决定世界如何被切开

项目 3-8：位置、注意力与 Transformer Block

attention 的本质：动态加权求和

项目 9-16：Decoding、KV Cache、长上下文与推理系统

模型能生成文本只是开始，能稳定快速地服务才是工程

项目 17-33：MoE、数据、后训练、评测、RAG、Agent 与安全

LLM 工程不是只有模型结构，数据、评测和失败处理同样是核心