torch.nn.funcitonal

torch.nn.functional是PyTorch中的一个模块，它包含了一些不具有可学习参数的函数，这些函数用于构建神经网络的各种操作，如激活函数、损失函数、池化操作等。

常用的激活函数有ReLU函数（torch.nn.functional.relu）、sigmoid函数（torch.nn.functional.sigmoid）和softmax函数（torch.nn.functional.softmax）等。损失函数常用的有交叉熵损失函数（torch.nn.functional.cross_entropy）和均方误差损失函数（torch.nn.functional.mse_loss）等。

除了激活函数和损失函数，torch.nn.functional还提供了一些其他的操作，如卷积操作（torch.nn.functional.conv2d）、池化操作（torch.nn.functional.max_pool2d）和线性变换（torch.nn.functional.linear）等。