完成一个手写数字识别的网络搭建和训练任务。并分析效果 2.完成网络后,加深网络(增加两个卷积层)效果进行比较 3.kernel size改成(3,3)看看实验效果 要求:使用两种算法进行预测,并分析实验结果python
时间: 2024-04-01 20:30:48 浏览: 39
python神经网络.rar_python;神经网络_specialtld_手写数字识别_神经网络
好的,首先需要明确的是这是一个图像分类任务,我们将使用MNIST数据集,其中包含手写数字图像数据。我们将使用PyTorch框架来搭建网络和进行训练。
## 1. 搭建网络并进行训练
### 1.1 导入必要的库和数据集
首先,我们需要导入必要的库和数据集。PyTorch提供了一个简单的API来加载MNIST数据集。
```python
import torch
import torch.nn as nn
import torch.optim as optim
from torchvision import datasets, transforms
# 加载MNIST数据集
train_dataset = datasets.MNIST('./data', train=True, download=True,
transform=transforms.Compose([
transforms.ToTensor(),
transforms.Normalize((0.1307,), (0.3081,))
]))
test_dataset = datasets.MNIST('./data', train=False, download=True,
transform=transforms.Compose([
transforms.ToTensor(),
transforms.Normalize((0.1307,), (0.3081,))
]))
```
我们还可以使用DataLoader来处理数据集,使其可以批量读取和转换为张量。
```python
batch_size = 64
# 创建数据加载器
train_loader = torch.utils.data.DataLoader(train_dataset, batch_size=batch_size, shuffle=True)
test_loader = torch.utils.data.DataLoader(test_dataset, batch_size=batch_size, shuffle=False)
```
### 1.2 定义模型
我们将使用一个简单的卷积神经网络来处理MNIST数据集。该网络具有两个卷积层和两个全连接层。
```python
class Net(nn.Module):
def __init__(self):
super(Net, self).__init__()
self.conv1 = nn.Conv2d(1, 10, kernel_size=5)
self.conv2 = nn.Conv2d(10, 20, kernel_size=5)
self.fc1 = nn.Linear(320, 50)
self.fc2 = nn.Linear(50, 10)
def forward(self, x):
x = nn.functional.relu(nn.functional.max_pool2d(self.conv1(x), 2))
x = nn.functional.relu(nn.functional.max_pool2d(self.conv2(x), 2))
x = x.view(-1, 320)
x = nn.functional.relu(self.fc1(x))
x = self.fc2(x)
return nn.functional.log_softmax(x, dim=1)
model = Net()
```
### 1.3 训练模型
我们使用交叉熵损失函数和随机梯度下降优化器来训练模型。
```python
learning_rate = 0.01
momentum = 0.5
# 定义损失函数和优化器
criterion = nn.CrossEntropyLoss()
optimizer = optim.SGD(model.parameters(), lr=learning_rate, momentum=momentum)
# 训练模型
def train(epoch):
model.train()
for batch_idx, (data, target) in enumerate(train_loader):
optimizer.zero_grad()
output = model(data)
loss = criterion(output, target)
loss.backward()
optimizer.step()
if batch_idx % 100 == 0:
print('Train Epoch: {} [{}/{} ({:.0f}%)]\tLoss: {:.6f}'.format(
epoch, batch_idx * len(data), len(train_loader.dataset),
100. * batch_idx / len(train_loader), loss.item()))
# 测试模型
def test():
model.eval()
test_loss = 0
correct = 0
with torch.no_grad():
for data, target in test_loader:
output = model(data)
test_loss += criterion(output, target).item()
pred = output.argmax(dim=1, keepdim=True)
correct += pred.eq(target.view_as(pred)).sum().item()
test_loss /= len(test_loader.dataset)
print('Test set: Average loss: {:.4f}, Accuracy: {}/{} ({:.0f}%)\n'.format(
test_loss, correct, len(test_loader.dataset),
100. * correct / len(test_loader.dataset)))
epochs = 10
for epoch in range(1, epochs + 1):
train(epoch)
test()
```
### 1.4 分析实验结果
训练结束后,我们可以看到模型在测试集上的准确率为98.92%。
## 2. 加深网络
接下来,我们将增加两个卷积层以加深网络。
```python
class Net(nn.Module):
def __init__(self):
super(Net, self).__init__()
self.conv1 = nn.Conv2d(1, 10, kernel_size=5)
self.conv2 = nn.Conv2d(10, 20, kernel_size=5)
self.conv3 = nn.Conv2d(20, 40, kernel_size=3)
self.conv4 = nn.Conv2d(40, 60, kernel_size=3)
self.fc1 = nn.Linear(540, 50)
self.fc2 = nn.Linear(50, 10)
def forward(self, x):
x = nn.functional.relu(nn.functional.max_pool2d(self.conv1(x), 2))
x = nn.functional.relu(nn.functional.max_pool2d(self.conv2(x), 2))
x = nn.functional.relu(self.conv3(x))
x = nn.functional.relu(self.conv4(x))
x = x.view(-1, 540)
x = nn.functional.relu(self.fc1(x))
x = self.fc2(x)
return nn.functional.log_softmax(x, dim=1)
model = Net()
```
我们重新训练模型。
```python
epochs = 10
for epoch in range(1, epochs + 1):
train(epoch)
test()
```
### 2.1 分析实验结果
训练结束后,我们可以看到模型在测试集上的准确率为99.18%。可以发现,加深网络后模型的性能有所提升。
## 3. 改变kernel size
接下来,我们将把卷积层的kernel size改为(3,3)。
```python
class Net(nn.Module):
def __init__(self):
super(Net, self).__init__()
self.conv1 = nn.Conv2d(1, 10, kernel_size=3)
self.conv2 = nn.Conv2d(10, 20, kernel_size=3)
self.fc1 = nn.Linear(500, 50)
self.fc2 = nn.Linear(50, 10)
def forward(self, x):
x = nn.functional.relu(nn.functional.max_pool2d(self.conv1(x), 2))
x = nn.functional.relu(nn.functional.max_pool2d(self.conv2(x), 2))
x = x.view(-1, 500)
x = nn.functional.relu(self.fc1(x))
x = self.fc2(x)
return nn.functional.log_softmax(x, dim=1)
model = Net()
```
我们重新训练模型。
```python
epochs = 10
for epoch in range(1, epochs + 1):
train(epoch)
test()
```
### 3.1 分析实验结果
训练结束后,我们可以看到模型在测试集上的准确率为99.08%。可以发现,改变kernel size后模型的性能略有下降。这可能是因为较小的kernel size会限制卷积层的感受野,导致模型难以学习到更高级的特征。
阅读全文