#十七、手撕代码专项的复习顺序
如果是 3-5 天速刷,建议顺序如下:
- 第一天:
softmax / mask / attention - 第二天:
top-k / top-p / sampling - 第三天:
RoPE / LoRA Linear / KV cache - 第四天:
向量检索 / RAG pipeline - 第五天:
batch 调度 / Agent loop / 伪代码题
这样安排的原因是:前两天先把张量流和采样搞熟,后面再做大模型特有模块,实现效率最高。
如果是 3-5 天速刷,建议顺序如下:
softmax / mask / attention
top-k / top-p / sampling
RoPE / LoRA Linear / KV cache
向量检索 / RAG pipeline
batch 调度 / Agent loop / 伪代码题
这样安排的原因是:前两天先把张量流和采样搞熟,后面再做大模型特有模块,实现效率最高。