之前有介绍符号化求导，也分析了符号化求导为什么不适合用来训练神经网络。接下来就介绍机器学习中训练神经网络使用的Auto Diff算法。