专题研修
专题研修：实现、验证与应用
以可运行实现和反例实验深入研究模型计算、智能体执行与工程系统。
建议完成相应基础课与系统篇章节后选读。本部分的章号仅在专题研修内使用；前后链接保持在同一部分中。实验手册说明运行入口、依赖、输入数据和验证范围。
本章目录
专题目录
01｜文本怎样成为概率：Tokenizer、模板、目标函数与梯度02｜进入Decoder：张量形状、RoPE、GQA与KV缓存的正确性03｜训练系统内部：数据、优化器、显存与分布式代价04｜后训练与推理模型：从偏好目标到可验证能力05｜输出怎样被选中：采样、推测解码与停止条件06｜推理服务的真实瓶颈：内存、FlashAttention、分页与调度07｜模型接口内部：消息、输出项、SSE与工具调用协议08｜Harness内部：决策、执行、持久化与崩溃恢复09｜Codex源码追踪：从仓库规则到历史、循环和压缩10｜Claude Code与Copilot：公开机制、可验证行为与未知内部11｜上下文编译器：信息选择、依赖闭包与预算12｜压缩的深层问题：有损状态、证据恢复与继续执行13｜检索系统内部：BM25、向量、ANN、融合与索引新鲜度14｜代码智能内部：AST、LSP、依赖图与版本化证据15｜记忆系统内部：双时间、冲突、来源与有用的遗忘16｜Skills、工具与模型路由：专业能力如何真正进入任务17｜多Agent内部：DAG、上下文交接、并发冲突与相关错误18｜工程质量的核心：契约、测试、反例、Review与交付证据19｜高级评测：配对实验、可靠性、因果归因与判分偏差20｜安全内部：可信边界、MCP授权、沙箱与副作用控制21｜生产可观测性与可靠运行：Trace、队列、取消和恢复22｜成本与性能决策：每个成功任务，而不是每个Token23｜微调、量化与蒸馏：改变模型，还是改变输入系统24｜多模态与计算机操作：表示、定位、观察—行动闭环25｜可信答案与可解释性：校准、拒答、证据与因果干预26｜高级研究分支：架构、搜索、RAG与记忆方法的选择逻辑27｜贯穿案例：修复exclude，从原始失败到可恢复交付28｜深度应用蓝图：企业问答、仓库诊断、研究与受控自动化29｜故障诊断手册：从现象到最小有效修复30｜资深能力验收：开放题、参考答案与毕业项目31｜推导附章：注意力反向传播与可训练检索