基于卷积神经网络的高维数据流异常检测方法
179 浏览量
更新于2024-08-03
收藏 1.4MB PDF 举报
"这篇论文由郑湘辉和张雪冰撰写,主要探讨了在计算机网络大规模高维数据流中异常数据的挖掘技术,旨在提高网络安全。他们采用了Python网络爬虫进行数据采集,通过软件总线模型进行数据清洗预处理,然后利用基于枢纽现象和加权离群分数的算法检测异常数据。进一步,他们构建了卷积神经网络模型来识别异常数据的类型。实验结果显示这种方法能有效地发现并识别异常数据,提高了网络安全。关键词包括加权离群分数、计算机网络、大规模、高维数据流、异常数据挖掘和数据清洗。"
文章中提到的问题是随着互联网和计算机技术的发展,计算机网络数据流数据量不断增大且维度增多,这使得数据多样化,同时也为网络攻击提供了更多机会。异常数据的存在对网络安全构成威胁,因此需要有效的挖掘方法来及时发现和防范这些风险。
作者们借鉴了康耀龙等人的朴素贝叶斯方法和仇媛等人的长短期记忆网络结合滑动窗口的方法,但他们的贡献在于提出了一种新的异常数据挖掘策略。首先,他们运用Python网络爬虫工具收集大规模的高维数据流,这是数据挖掘的第一步,确保了数据的全面性和实时性。接着,通过软件总线模型对原始数据进行清洗和预处理,减少数据规模和维度,这是数据预处理的关键步骤,有助于后续分析的效率和准确性。
核心算法部分,他们采用了基于枢纽现象与加权离群分数的离群数据挖掘算法。这种方法考虑了数据之间的相互关系和权重,能够更精确地定位异常数据。通过K近邻查询和数据对象的离群分数计算,可以识别出与正常模式显著偏离的数据点。同时,设置区分度阈值进一步筛选出真正的异常数据,增强了异常检测的鲁棒性。
最后,为了识别异常数据的具体类型,作者们构建了卷积神经网络(CNN)模型。CNN在图像识别和模式识别方面表现出色,将其应用于数据流数据的分类,能有效识别不同类型的异常,提升了异常数据挖掘的精度和实用性。
实验结果证明了该方法的有效性,不仅能够有效地挖掘异常数据,而且识别准确性高,对于提升计算机网络的安全性具有重要意义。这种方法的应用对于预防网络攻击、保障用户信息安全具有重要价值,尤其在当前大数据和云计算背景下,其重要性更加凸显。
2021-07-14 上传
2021-12-17 上传
2021-07-14 上传
2021-01-16 上传
2021-07-14 上传
2020-06-16 上传
2021-08-07 上传
2020-04-06 上传
2019-12-01 上传
徐浪老师
- 粉丝: 7430
- 资源: 6987
最新资源
- ES管理利器:ES Head工具详解
- Layui前端UI框架压缩包:轻量级的Web界面构建利器
- WPF 字体布局问题解决方法与应用案例
- 响应式网页布局教程:CSS实现全平台适配
- Windows平台Elasticsearch 8.10.2版发布
- ICEY开源小程序:定时显示极限值提醒
- MATLAB条形图绘制指南:从入门到进阶技巧全解析
- WPF实现任务管理器进程分组逻辑教程解析
- C#编程实现显卡硬件信息的获取方法
- 前端世界核心-HTML+CSS+JS团队服务网页模板开发
- 精选SQL面试题大汇总
- Nacos Server 1.2.1在Linux系统的安装包介绍
- 易语言MySQL支持库3.0#0版全新升级与使用指南
- 快乐足球响应式网页模板:前端开发全技能秘籍
- OpenEuler4.19内核发布:国产操作系统的里程碑
- Boyue Zheng的LeetCode Python解答集