自动微分系列将会大概初步谈了谈从手动微分到自动微分的过程,03 自动微分正反模式中深入了自动微分的正反向模式具体公式和推导。实际上 02 了解到正反向模式只是自动微分的原理模式,在实际代码实现的过程,04 会通过三种实现方式(基于库、操作符重载、源码转换)来实现。05和06则是具体跟大家一起手把手实现一个类似于PyTorch的自动微分框架。07最后做个小小的总结,一起review自动微分面临易用性、性能的挑战,最后在可微分编程方面畅享了下未来。
建议优先下载或者使用PDF版本,PPT版本会因为字体缺失等原因导致版本很丑哦~
编号 | 名称 | 名称 | 备注 |
1 | 自动微分 | 01 基本介绍 | silde, video, article |
自动微分 | 02 什么是微分 | silde, video, article | |
自动微分 | 03 正反向计算模式 | silde, video, article | |
自动微分 | 04 三种实现方法 | silde, video, article | |
自动微分 | 05 手把手实现正向微分框架 | silde, video, article | |
自动微分 | 06 亲自实现一个PyTorch | silde, video, article | |
自动微分 | 07 自动微分的挑战&未来 | silde, video | |