LOF-VAE:互联网应用中无监督KPI异常检测的创新方法

需积分: 0 1 下载量 165 浏览量 更新于2024-08-05 收藏 822KB PDF 举报
本文主要探讨了"基于变分自编码器(Variational Auto-Encoder, VAE)与局部异常因子(Local Outliers Factor, LOF)的无监督异常检测"这一前沿技术在信息技术领域的应用。随着互联网应用的普及,网络业务系统变得日益普遍,为了确保系统的正常运行,监控关键性能指标(Key Performance Indicators, KPIs)如网络流量、页面浏览量和用户订单状态等变得至关重要。然而,由于异常的多样性和复杂性,尤其是在缺乏标签的情况下,准确、实时地检测出这些异常是一项具有挑战性的任务。 研究者Shili Yan、Bing Tang、Jincheng Luo、Xing Fu和Xiaoyuan Zhang来自湖南科技大学计算机科学与工程学院,他们针对这一问题提出了LOF-VAE算法。LOF-VAE巧妙地结合了LOF方法,它是一种有效的异常检测算法,通过计算数据点周围的密度差异来识别异常,以及VAE,一种强大的深度学习模型,用于学习数据的潜在分布并生成新的样本。VAE的潜在空间特性使得LOF-VAE能够在无监督情况下有效地识别KPI中的异常行为。 实验部分,作者使用来自大型互联网公司的实际世界数据进行了验证。结果显示,LOF-VAE在F-score指标上表现出色,其最佳得分范围从0.89到0.99,这表明该算法在异常检测的准确性上达到了业界领先水平。相比于现有的无监督方法,LOF-VAE在处理复杂异常模式时显示出更高的鲁棒性和精确度,这对于实时维护在线业务系统的稳定性和效率具有重要意义。 总结来说,这篇文章的核心贡献在于提出了一种创新的无监督异常检测方法,利用LOF-VAE的有效融合,解决了在KPI监控中遇到的异常检测难题。这种技术对于提升互联网企业的运维效率和服务质量具有显著价值,也为未来异常检测领域的研究提供了新的思路和方向。