torch.autograd

torch.autograd是PyTorch中的一个自动求导引擎，它能够自动计算张量的梯度。在深度学习中，梯度是非常重要的，因为它可以告诉我们在当前模型参数下，目标函数的变化率最大的方向。在PyTorch中，我们可以使用torch.autograd来自动计算梯度，而不需要手动推导公式。当我们定义一个张量时，如果设置了requires_grad=True，那么这个张量就会被加入到计算图中，计算图会记录所有的计算操作，并根据链式法则自动计算梯度。最终，我们可以使用backward()函数来自动计算梯度。