cs231n 卷积神经网络

Question

我正在观看斯坦福大学 CS 231n 的在线讲座。我有一个问题，也许我出于某种原因感到困惑。链接是： the video

转到35:46，在backward函数中，dx的公式为：

dx = self.y * dz. 

我没有得到，因为

z = x*y. 

所以

dx = dz/y

谁能解释一下为什么会发生这种差异？

Answer 1

这只是他的代码中的一个奇怪的符号（dz,dx,dy 在他们通常的意义上没有使用）。这里的变量dz表示成本函数L（完整的神经网络）关于z的导数，而L 关于 x 和 y 记为 dx 和 dy。 z 相对于 x，即 y，由 self.y 简单地给出。考虑到这些符号，其余的遵循链式规则。