AI Infra
学习手册
Python
PyTorch
大模型
Transformer
从零训练
C++
CUDA
推理
训练
mini-sglang
计算机基础
数学
图像视频
SGLang 演进
SGLang-Omni
手册
Python 进阶
数据模型、类型、并发与性能
PyTorch 速成
张量、形状、autograd、模型与训练循环
大模型原理
Transformer、KV Cache、量化与估算
手写 Transformer
从 main.py 开始手写 Qwen3.5,每一步和 HF 对答案
从零训练一个小模型
语料、分词器、模型与训练循环,在自己的电脑上跑
C++ 进阶
RAII、移动语义、内存序与内存池
CUDA 进阶
GEMM、FlashAttention、Tensor Core
推理系统
调度、并行、PD 分离与前沿专题
分布式训练
DDP、ZeRO、3D 并行与 RL 训练
手写 mini-sglang
从零写一个完整的推理引擎
计算机基础
操作系统、体系结构、网络与算法
数学基础
线性代数、概率、信息论与性能数学
图像与视频生成
扩散模型的推理、加速与服务
SGLang 设计演进
从 commit 历史读源码设计思路
SGLang-Omni 源码导读
全模态与语音模型的多阶段运行时,读到能提 MR
学习路线
练习题
更多
学习路线
十五本手册的逐章路线,按周排好
练习题
每章配套的编程题,浏览器里判题
17 周冲刺计划
逐周的章节、练习与验收清单
学习卡
间隔重复复习自测题与面试题
Playground
浏览器里的 Python 沙盒
学习环境
Mac 上一键准备全部环境
全站搜索
十五本手册与练习题一起搜
EN
全站搜索
在十五本手册、练习题和学习路线里一起搜索。多个关键词用空格分开,结果需要同时包含所有关键词。