MPI 是集合通信库的鼻祖，英伟达 NVIDIA 大量的参考和借鉴 MPI 通信库相关的内容从而提出了业界集合通信库的标杆 NCCL。本将会从 MPI 开始，介绍业界的各种主流集合通信库的变种 XCCL。然后深入地剖析 NCCL 相关的实现算法、对外 API 等，最后还会介绍华为开源的 HCCL 集合通信库。
PPT和字幕需要到 Github 下载，网页课程版链接会失效哦~建议优先下载 PDF 版本，PPT 版本会因为字体缺失等原因导致版本很丑哦~
| 大纲 | 小节 | 链接 |
|---|---|---|
| 集合通信库 | 01 通信库基础MPI介绍 | PPT, 视频 |
| 集合通信库 | 02 02 业界XCCL大串烧(上) | PPT, 视频 |
| 集合通信库 | 03 02 业界XCCL大串烧(下) | PPT, 视频 |
| 集合通信库 | 04 英伟达 NCCL 原理剖析 | PPT, 视频 |
| 集合通信库 | 05 英伟达 NCCL API介绍 | PPT, 视频 |
| 集合通信库 | 06 NCCL通信算法与拓扑关系 | PPT, 视频 |
| 集合通信库 | 07 NCCL双二叉树算法原理 | PPT, 视频 |
| 集合通信库 | 08 华为 HCCL 架构介绍 | PPT, 视频 |
| 集合通信库 | 09 华为 HCCL 拓扑算法 | PPT, 视频 |
| 集合通信库 | 10 通信模型&通信影响 | PPT, 视频 |
文字课程内容正在一节节补充更新，每晚会抽空继续更新正在 AISys ，希望您多多鼓励和参与进来！！！
文字课程开源在 AISys，系列视频托管B 站和油管，PPT 开源在github，欢迎取用！！！
非常希望您也参与到这个开源课程中，B 站给 ZOMI 留言哦！
欢迎大家使用的过程中发现 bug 或者勘误直接提交代码 PR 到开源社区哦！
希望这个系列能够给大家、朋友们带来一些些帮助，也希望自己能够继续坚持完成所有内容哈！