网络空间测绘系统：数据采集与协议识别

"数据采集层-neural networks and deep learning" 在数据采集层，主要涉及到的是对企事业单位网络空间资产信息的收集与分析。这一过程主要包括全网端口扫描、协议识别、网络爬虫和流量监控等多个模块。这些模块旨在识别并收集网络中各个设备的开放端口、协议信息以及网站内容等，为后续的数据处理和分析提供基础数据。 3.2.1 模块功能 - 全网端口扫描：这个模块定期扫描网络空间中的常用标准端口和非标准端口，如21（FTP）、22（SSH）、80（HTTP）、3306（MySQL）等，以及工控协议端口和数据库端口，以确定这些端口是否开放。 - 协议识别：根据端口和协议信息，此模块能详细识别出各种协议，收集IP、端口号、Banner、证书等信息。 - 网络爬虫：针对HTTP协议，爬虫模块会主动抓取Host、Domain、Header、Server、Body和Title等信息，以获取网站的基本结构和内容。 3.2.2 模块实现方案 - 任务调度：通过任务调度机制，首先进行快速全网端口扫描，然后将扫描数据汇总并传送到数据存储模块的高速缓存任务队列。 - 协议识别：接收扫描数据后，协议识别模块使用多线程并发技术进行端口服务识别。它向服务器发送特定的协议请求，并对比返回信息，确保识别的准确性。 - 网络爬虫：对于识别为HTTP协议的IP和端口，网络爬虫模块会进一步爬取HTTP信息，包括网页内容等。 网络空间测绘系统，如BMH Technologies Co. Ltd.'s FOEYE，是解决资产管理挑战的工具。面对大规模的资产数量、频繁变动的资产状态以及安全事件的应急处理需求，网络空间测绘系统提供了一种自动化和高效的方法来收集和管理这些信息。 数据采集层是网络空间测绘系统的基础，其工作流程包括： - 首先，通过端口扫描发现网络中存在的资产。 - 然后，协议识别模块对这些资产的开放端口进行深入分析，识别出运行的服务类型和相关信息。 - 最后，网络爬虫模块则用于抓取HTTP协议相关的网站内容，丰富资产信息。 这种系统架构有助于企业快速、全面且准确地了解其网络空间资产，包括内外网设备、各种协议服务和可能的安全风险。通过网络空间测绘，企业可以更好地管理其资产，及时发现并应对安全威胁，提高整体网络安全防护能力。