使用Python实现神经网络学习,输出使用后4000个样本训练得到模型在测试集上的结果并可视化,参数设置为: batch :300; iters _ num :2000; lamda :0.1

时间: 2023-11-22 11:56:38 浏览: 39
好的,我们可以使用Python中的NumPy库来实现神经网络学习,并使用Matplotlib库进行可视化。 首先,我们需要准备数据集并对其进行预处理。这里我们使用一个简单的手写数字识别数据集,包含训练集和测试集,每张图片大小为28x28像素。我们将每张图片展开成一维向量,并进行归一化处理。 ```python import numpy as np import matplotlib.pyplot as plt # 加载数据集 train_data = np.load('train_data.npy') test_data = np.load('test_data.npy') # 对数据进行预处理 train_X = train_data[:, :-1] / 255.0 train_y = train_data[:, -1] test_X = test_data[:, :-1] / 255.0 test_y = test_data[:, -1] # 将标签转换为独热编码 train_Y = np.zeros((train_y.shape[0], 10)) train_Y[np.arange(train_y.shape[0]), train_y] = 1 test_Y = np.zeros((test_y.shape[0], 10)) test_Y[np.arange(test_y.shape[0]), test_y] = 1 ``` 接下来,我们定义一个三层神经网络模型,包含一个输入层、一个隐藏层和一个输出层。我们使用交叉熵损失函数和L2正则化,同时使用随机梯度下降算法进行优化。 ```python class NeuralNetwork: def __init__(self, input_size, hidden_size, output_size, learning_rate, reg_lambda): self.input_size = input_size self.hidden_size = hidden_size self.output_size = output_size self.learning_rate = learning_rate self.reg_lambda = reg_lambda # 初始化权重 self.W1 = np.random.randn(input_size, hidden_size) self.b1 = np.zeros((1, hidden_size)) self.W2 = np.random.randn(hidden_size, output_size) self.b2 = np.zeros((1, output_size)) def forward(self, X): # 前向传播 self.z1 = np.dot(X, self.W1) + self.b1 self.a1 = np.tanh(self.z1) self.z2 = np.dot(self.a1, self.W2) + self.b2 exp_scores = np.exp(self.z2) self.probs = exp_scores / np.sum(exp_scores, axis=1, keepdims=True) return self.probs def compute_cost(self, X, y): # 计算损失函数 num_samples = X.shape[0] data_loss = -np.sum(y * np.log(self.probs)) / num_samples reg_loss = 0.5 * self.reg_lambda * (np.sum(np.square(self.W1)) + np.sum(np.square(self.W2))) return data_loss + reg_loss def backward(self, X, y): # 反向传播 delta3 = self.probs - y dW2 = np.dot(self.a1.T, delta3) db2 = np.sum(delta3, axis=0, keepdims=True) delta2 = np.dot(delta3, self.W2.T) * (1 - np.power(self.a1, 2)) dW1 = np.dot(X.T, delta2) db1 = np.sum(delta2, axis=0) # 加上L2正则化的梯度 dW2 += self.reg_lambda * self.W2 dW1 += self.reg_lambda * self.W1 # 更新权重和偏置 self.W1 -= self.learning_rate * dW1 self.b1 -= self.learning_rate * db1 self.W2 -= self.learning_rate * dW2 self.b2 -= self.learning_rate * db2 def train(self, X, y, num_iters, batch_size): # 随机梯度下降算法 for i in range(num_iters): # 随机选择一个batch的数据进行训练 batch_indices = np.random.choice(X.shape[0], batch_size) X_batch = X[batch_indices] y_batch = y[batch_indices] # 前向传播和反向传播 self.forward(X_batch) self.backward(X_batch, y_batch) # 每隔100次迭代输出一次损失函数 if i % 100 == 0: cost = self.compute_cost(X, y) print('Iteration %d, cost: %f' % (i, cost)) def predict(self, X): # 预测结果 probs = self.forward(X) return np.argmax(probs, axis=1) ``` 接下来,我们实例化一个神经网络模型并进行训练。我们使用2000次迭代,每次随机选择300个样本进行训练,并设置L2正则化参数为0.1。 ```python # 实例化神经网络模型并进行训练 nn = NeuralNetwork(input_size=784, hidden_size=50, output_size=10, learning_rate=0.01, reg_lambda=0.1) nn.train(train_X, train_Y, num_iters=2000, batch_size=300) ``` 最后,我们使用测试集评估模型的性能,并可视化模型在测试集上的结果。 ```python # 在测试集上评估模型 test_pred = nn.predict(test_X) accuracy = np.mean(test_pred == test_y) * 100 print('Test accuracy: %.2f%%' % accuracy) # 可视化模型在测试集上的结果 fig, axes = plt.subplots(5, 5, figsize=(10, 10)) for i, ax in enumerate(axes.flat): ax.imshow(test_X[i].reshape((28, 28)), cmap='gray') ax.set_title('True: %d, Pred: %d' % (test_y[i], test_pred[i])) ax.axis('off') plt.show() ``` 运行完整的代码后,可以得到模型在测试集上的准确率,并可视化模型在测试集上的预测结果。

相关推荐

最新推荐

recommend-type

基于springboot开发的前后端分离的简易进销存后台管理系统.zip

基于springboot的java毕业&课程设计
recommend-type

基于springboot-mqtt的温度、湿度、六氟化硫浓度实时监控系统.zip

基于springboot的java毕业&课程设计
recommend-type

会计信息化对华强公司内部审计的影响研究.docx

会计信息化对华强公司内部审计的影响研究.docx
recommend-type

修改谷歌提供的样例量子卷积神经网络模型,基于KDD99数据集进行训练,实现了网络攻击分类检测。.zip

卷积神经网络(Convolutional Neural Networks, CNNs 或 ConvNets)是一类深度神经网络,特别擅长处理图像相关的机器学习和深度学习任务。它们的名称来源于网络中使用了一种叫做卷积的数学运算。以下是卷积神经网络的一些关键组件和特性: 卷积层(Convolutional Layer): 卷积层是CNN的核心组件。它们通过一组可学习的滤波器(或称为卷积核、卷积器)在输入图像(或上一层的输出特征图)上滑动来工作。 滤波器和图像之间的卷积操作生成输出特征图,该特征图反映了滤波器所捕捉的局部图像特性(如边缘、角点等)。 通过使用多个滤波器,卷积层可以提取输入图像中的多种特征。 激活函数(Activation Function): 在卷积操作之后,通常会应用一个激活函数(如ReLU、Sigmoid或tanh)来增加网络的非线性。 池化层(Pooling Layer): 池化层通常位于卷积层之后,用于降低特征图的维度(空间尺寸),减少计算量和参数数量,同时保持特征的空间层次结构。 常见的池化操作包括最大池化(Max Pooling)和平均池化(Average Pooling)。 全连接层(Fully Connected Layer): 在CNN的末端,通常会有几层全连接层(也称为密集层或线性层)。这些层中的每个神经元都与前一层的所有神经元连接。 全连接层通常用于对提取的特征进行分类或回归。 训练过程: CNN的训练过程与其他深度学习模型类似,通过反向传播算法和梯度下降(或其变种)来优化网络参数(如滤波器权重和偏置)。 训练数据通常被分为多个批次(mini-batches),并在每个批次上迭代更新网络参数。 应用: CNN在计算机视觉领域有着广泛的应用,包括图像分类、目标检测、图像分割、人脸识别等。 它们也已被扩展到处理其他类型的数据,如文本(通过卷积一维序列)和音频(通过卷积时间序列)。 随着深度学习技术的发展,卷积神经网络的结构和设计也在不断演变,出现了许多新的变体和改进,如残差网络(ResNet)、深度卷积生成对抗网络(DCGAN)等。
recommend-type

用泽尼克多项式拟合表面的功能matlab代码.zip

1.版本:matlab2014/2019a/2021a 2.附赠案例数据可直接运行matlab程序。 3.代码特点:参数化编程、参数可方便更改、代码编程思路清晰、注释明细。 4.适用对象:计算机,电子信息工程、数学等专业的大学生课程设计、期末大作业和毕业设计。
recommend-type

zigbee-cluster-library-specification

最新的zigbee-cluster-library-specification说明文档。
recommend-type

管理建模和仿真的文件

管理Boualem Benatallah引用此版本:布阿利姆·贝纳塔拉。管理建模和仿真。约瑟夫-傅立叶大学-格勒诺布尔第一大学,1996年。法语。NNT:电话:00345357HAL ID:电话:00345357https://theses.hal.science/tel-003453572008年12月9日提交HAL是一个多学科的开放存取档案馆,用于存放和传播科学研究论文,无论它们是否被公开。论文可以来自法国或国外的教学和研究机构,也可以来自公共或私人研究中心。L’archive ouverte pluridisciplinaire
recommend-type

实现实时数据湖架构:Kafka与Hive集成

![实现实时数据湖架构:Kafka与Hive集成](https://img-blog.csdnimg.cn/img_convert/10eb2e6972b3b6086286fc64c0b3ee41.jpeg) # 1. 实时数据湖架构概述** 实时数据湖是一种现代数据管理架构,它允许企业以低延迟的方式收集、存储和处理大量数据。与传统数据仓库不同,实时数据湖不依赖于预先定义的模式,而是采用灵活的架构,可以处理各种数据类型和格式。这种架构为企业提供了以下优势: - **实时洞察:**实时数据湖允许企业访问最新的数据,从而做出更明智的决策。 - **数据民主化:**实时数据湖使各种利益相关者都可
recommend-type

SQL怎么实现 数据透视表

SQL可以通过使用聚合函数和GROUP BY子句来实现数据透视表。 例如,假设有一个销售记录表,其中包含产品名称、销售日期、销售数量和销售额等信息。要创建一个按照产品名称、销售日期和销售额进行汇总的数据透视表,可以使用以下SQL语句: ``` SELECT ProductName, SaleDate, SUM(SaleQuantity) AS TotalQuantity, SUM(SaleAmount) AS TotalAmount FROM Sales GROUP BY ProductName, SaleDate; ``` 该语句将Sales表按照ProductName和SaleDat
recommend-type

JSBSim Reference Manual

JSBSim参考手册,其中包含JSBSim简介,JSBSim配置文件xml的编写语法,编程手册以及一些应用实例等。其中有部分内容还没有写完,估计有生之年很难看到完整版了,但是内容还是很有参考价值的。