别背术语，
动手看因果。Don't memorize.
Make cause visible.

基础Foundation S1-01 · 数据样本S1-01 · Data Sample S1-02 · 特征S1-02 · Feature S1-03 · 标量S1-03 · Scalar S1-04 · 维度S1-04 · Dimension S1-05 · 向量S1-05 · Vector S1-08 · 余弦相似度S1-08 · Cosine Similarity S1-09 · 矩阵S1-09 · Matrix S1-12 · 坐标空间S1-12 · Coordinate Space S1-13 · 独热编码S1-13 · One-hot Encoding S1-14 · Embedding S1-16 · Token S1-17 · Tokenizer S1-18 · 词表S1-18 · Vocabulary S1-20 · Token ID 进阶Advanced S1-06 · 向量长度S1-06 · Vector Magnitude S1-07 · 点积S1-07 · Dot Product S1-10 · 矩阵乘法S1-10 · Matrix Multiplication S1-11 · Tensor S1-15 · 嵌入空间S1-15 · Embedding Space S1-19 · BPE

基础Foundation S2-01 · 监督学习S2-01 · Supervised Learning S2-02 · 标签S2-02 · Label S2-03 · 预测目标S2-03 · Prediction Target S2-04 · 概率预测S2-04 · Probabilistic Prediction S2-05 · 概率分布S2-05 · Probability Distribution S2-06 · 参数与权重S2-06 · Parameters and Weights S2-07 · 神经元S2-07 · Artificial Neuron S2-08 · 激活函数S2-08 · Activation Function S2-09 · 前向传播S2-09 · Forward Pass S2-17 · 训练/验证/测试集S2-17 · Train/Validation/Test Split 进阶Advanced S2-10 · 损失函数S2-10 · Loss Function S2-11 · 交叉熵S2-11 · Cross-Entropy S2-12 · 梯度 · 3DS2-12 · Gradient · 3D S2-13 · 梯度下降 · 3DS2-13 · Gradient Descent · 3D S2-14 · 学习率 · 3DS2-14 · Learning Rate · 3D S2-15 · 反向传播S2-15 · Backpropagation S2-16 · 批次与轮次S2-16 · Batch and Epoch S2-18 · 欠拟合S2-18 · Underfitting S2-19 · 过拟合S2-19 · Overfitting S2-20 · 泛化S2-20 · Generalization

基础Foundation S3-01 · 网络层S3-01 · Neural Network Layer S3-03 · 注意力S3-03 · Attention S3-15 · Transformer 架构S3-15 · Transformer Architecture S3-18 · 上下文窗口S3-18 · Context Window S3-20 · 参数量S3-20 · Parameter Count 进阶Advanced S3-02 · 前馈网络S3-02 · Feed-Forward Network S3-04 · Query S3-05 · Key S3-06 · Value S3-07 · 注意力分数S3-07 · Attention Score S3-08 · 自注意力S3-08 · Self-Attention S3-09 · 因果掩码S3-09 · Causal Mask S3-10 · 多头注意力S3-10 · Multi-Head Attention S3-11 · 位置编码S3-11 · Positional Encoding S3-12 · 残差连接S3-12 · Residual Connection S3-13 · 层归一化S3-13 · Layer Normalization S3-14 · Transformer 块S3-14 · Transformer Block S3-16 · 编码器S3-16 · Encoder S3-17 · 解码器S3-17 · Decoder 高阶Advanced+ S3-19 · KV Cache S3-21 · 混合专家模型S3-21 · Mixture of Experts

基础Foundation S4-03 · 下一个 Token 预测S4-03 · Next-Token Prediction S4-04 · 自回归生成S4-04 · Autoregressive Generation S4-05 · 采样S4-05 · Sampling S4-06 · 贪心解码S4-06 · Greedy Decoding S4-07 · 温度S4-07 · Temperature S4-11 · 结束 TokenS4-11 · End-of-Sequence Token S4-12 · 最大输出长度S4-12 · Maximum Output Length S4-16 · 结构化输出S4-16 · Structured Output S4-17 · 幻觉S4-17 · Hallucination S4-18 · 事实锚定S4-18 · Grounding 进阶Advanced S4-01 · Logits S4-02 · Softmax S4-08 · Top-k S4-09 · Top-p S4-10 · 随机种子S4-10 · Random Seed S4-13 · 重复惩罚S4-13 · Repetition Penalty 高阶Expert S4-14 · 束搜索S4-14 · Beam Search S4-15 · 受约束解码S4-15 · Constrained Decoding

基础Foundation S5-01 · 训练语料S5-01 · Training Corpus S5-02 · 预训练S5-02 · Pretraining S5-03 · 训练目标S5-03 · Training Objective S5-06 · 模型检查点S5-06 · Model Checkpoint S5-07 · 微调S5-07 · Fine-tuning 进阶Advanced S5-04 · 因果语言建模S5-04 · Causal Language Modeling S5-05 · 掩码语言建模S5-05 · Masked Language Modeling S5-08 · 监督微调S5-08 · Supervised Fine-tuning S5-09 · 指令微调S5-09 · Instruction Tuning S5-10 · 偏好数据S5-10 · Preference Data S5-14 · 参数高效微调S5-14 · Parameter-Efficient Fine-tuning S5-15 · 低秩适配S5-15 · LoRA S5-17 · 灾难性遗忘S5-17 · Catastrophic Forgetting S5-19 · 模型量化S5-19 · Model Quantization 高阶Expert S5-11 · 奖励模型S5-11 · Reward Model S5-12 · 人类反馈强化学习S5-12 · RLHF S5-13 · 直接偏好优化S5-13 · DPO S5-16 · 量化低秩适配S5-16 · QLoRA S5-18 · 知识蒸馏S5-18 · Knowledge Distillation S5-20 · 缩放定律 · 3DS5-20 · Scaling Laws · 3D S5-21 · 涌现能力S5-21 · Emergent Capabilities

基础Foundation S6-01 · 提示S6-01 · Prompt S6-02 · 系统提示S6-02 · System Prompt S6-03 · 消息角色S6-03 · Message Roles S6-04 · 提示模板S6-04 · Prompt Template S6-08 · 上下文窗口管理S6-08 · Context Window Management S6-11 · RAG S6-12 · 文档解析S6-12 · Document Parsing S6-13 · 分块S6-13 · Chunking S6-18 · 元数据过滤S6-18 · Metadata Filtering S6-19 · 引用与归因S6-19 · Citation & Attribution 进阶Advanced S6-05 · 少样本提示S6-05 · Few-shot Prompting S6-06 · 思维链提示S6-06 · Chain-of-Thought Prompting S6-07 · 上下文工程S6-07 · Context Engineering S6-14 · 稠密检索S6-14 · Dense Retrieval S6-15 · 稀疏检索S6-15 · Sparse Retrieval S6-16 · 混合检索S6-16 · Hybrid Retrieval S6-17 · 重排序S6-17 · Reranking S6-20 · 检索评测S6-20 · Retrieval Evaluation 高阶Expert S6-09 · 上下文腐化S6-09 · Context Rot S6-10 · 中间信息遗失S6-10 · Lost in the Middle

基础Foundation S7-01 · Agent S7-02 · Agent 循环S7-02 · Agent Loop S7-03 · 规划S7-03 · Planning S7-04 · 行动—观察循环S7-04 · Action-Observation Cycle S7-05 · 工具使用S7-05 · Tool Use S7-06 · 函数调用S7-06 · Function Calling S7-08 · Harness S7-11 · 外部状态S7-11 · External State S7-14 · Agent 记忆S7-14 · Agent Memory S7-18 · 人在回路S7-18 · Human-in-the-loop S7-19 · 护栏S7-19 · Guardrails 进阶Advanced S7-07 · 模型上下文协议S7-07 · Model Context Protocol S7-09 · 状态机S7-09 · State Machine S7-10 · DAG 工作流S7-10 · DAG Workflow S7-12 · 检查点与恢复S7-12 · Checkpoint and Resume S7-13 · 幂等性S7-13 · Idempotency S7-15 · 短期记忆S7-15 · Short-term Memory S7-16 · 长期记忆S7-16 · Long-term Memory S7-20 · 沙箱与最小权限S7-20 · Sandbox and Least Privilege 高阶Expert S7-17 · 多 Agent 系统S7-17 · Multi-Agent System

基础Foundation S8-01 · 离线评测S8-01 · Offline Evaluation S8-02 · 黄金集S8-02 · Gold Set S8-04 · 基准测试S8-04 · Benchmark S8-07 · 可观测性S8-07 · Observability S8-08 · 调用追踪S8-08 · Trace S8-09 · 延迟与吞吐S8-09 · Latency and Throughput S8-10 · Token 与成本预算S8-10 · Token and Cost Budget S8-13 · 降级与回退S8-13 · Degradation and Fallback S8-17 · 提示注入S8-17 · Prompt Injection S8-19 · 隐私与合规S8-19 · Privacy and Compliance 进阶Advanced S8-03 · 留出测试集S8-03 · Held-out Test Set S8-05 · 模型裁判S8-05 · LLM-as-a-Judge S8-11 · 端到端可靠率S8-11 · End-to-end Reliability S8-12 · 错误预算S8-12 · Error Budget S8-14 · 影子运行S8-14 · Shadow Mode S8-15 · 金丝雀发布S8-15 · Canary Release S8-16 · 红队测试S8-16 · Red Teaming S8-18 · 安全与质量分轴S8-18 · Safety-Quality Separation S8-20 · 模型与数据漂移S8-20 · Model and Data Drift 高阶Expert S8-06 · 评测污染S8-06 · Evaluation Contamination