《{{ book.title }}》封面

深入理解 AI Infra:量化分析与系统设计

从模型架构到数据中心网络,用数量级估算拆解 LLM 推理与训练系统:显存放不放得下、延迟要多久、加卡能带来多少收益,都给出可复算的过程。

人工智能13 章37.5 万字0 阅读 作者 李博杰Apache-2.0

AI Infra 的资料有个通病:要么讲芯片讲了半天没有一笔账,要么讲框架全是 API 用法。这本书反过来——每一层都从物理约束出发做数量级估算:数据放不放得下、一次前向要等多久、加一张卡能换来多少收益,推导过程完整可复算,算完再去看真实系统为什么长这样。

作者李博杰(中国科学技术大学博士、华为「天才少年」出身)长期做 AI 系统与 Agent 方向,这本书是他 AI 系列开源书的第二本,与《深入理解 AI Agent》互为上下游:那本讲模型之上的应用,这本讲模型之下的系统。

12 章 + 前言沿「模型的执行过程」展开:先认识模型架构与推理/训练两类负载,然后一路向下——加速器架构、算子与运行时,再横向铺开——超节点、数据中心网络,最后回到系统设计:推理优化、分布式推理、训练系统、资源调度与端边云协同。每章都有围绕真实硬件(H100、昇腾、Mac Studio 集群等)的案例。

原书以 Apache-2.0 协议开源,本站按原许可转载,正文未改动,仓库链接见页脚。

目录

13 章 · 点章名直接读
  1. 1前言0.7 万字0 阅读
  2. 2第1章 初识 AI Infra1.9 万字0 阅读
  3. 3第2章 模型架构3.2 万字0 阅读
  4. 4第3章 推理与训练负载2.5 万字0 阅读
  5. 5第4章 加速器架构3.7 万字0 阅读
  6. 6第5章 算子与运行时3.1 万字0 阅读
  7. 7第6章 超节点3.7 万字0 阅读
  8. 8第7章 数据中心网络4.0 万字0 阅读
  9. 9第8章 推理优化2.4 万字0 阅读
  10. 10第9章 分布式推理3.3 万字0 阅读
  11. 11第10章 训练系统3.2 万字0 阅读
  12. 12第11章 资源调度与运行环境2.9 万字0 阅读
  13. 13第12章 端边云协同2.7 万字0 阅读
觉得有用,转给需要的人:

本页正文转载自开源项目 深入理解 AI Infra:量化分析与系统设计,按 Apache-2.0 许可刊载,正文未改动。