大数据流式计算中的内存节能策略:25.5%节能与0.0766性能/能耗比

0 下载量 134 浏览量 更新于2024-08-29 收藏 1.75MB PDF 举报
本文主要探讨了大数据流式计算环境中的一种内存节能策略(ESFM),针对当前流式计算系统在计算和存储过程中存在的能耗过高问题。流式计算通常需要频繁地读写数据,这使得内存消耗成为能源消耗的重要组成部分。文章首先对内存的不同状态,如活动状态和休眠状态,进行了深入研究,明确了它们之间的同步关系和转换条件。通过降低活跃状态下内存的供电电压,可以减少处于活动状态的物理内存节点的数量,从而将部分内存从活跃状态调整至休眠状态,实现内存的节能。 该节能策略的核心步骤包括:一是确保内存状态转换的稳定性和效率;二是动态管理内存活动和休眠状态,根据数据处理需求调整内存分配;三是设计合理的数据存储策略,将计算后的数据暂存于休眠状态的内存空间,以减少能源消耗。在24台普通PC构建的流式计算系统实验中,实施内存节能策略后,系统的能耗大约减少了25.5%,显示出明显的节能效果。 值得注意的是,尽管节能策略降低了能耗,但它并未对系统的性能造成显著影响。实际上,新策略下的性能与能耗比值(0.0766tuple/s·J)相比原系统(0.0792tuple/s·J)有所提高,这表明内存节能策略能够在保持高效计算的同时实现节能减排。 本文的研究对于那些在大数据处理场景下寻求能源效率提升的流式计算系统具有重要的实践价值,尤其是在云计算和分布式计算领域,它提供了一种实用且环保的内存管理方法。作者团队由多名在绿色计算、分布式计算等领域有深厚研究背景的专家组成,他们的研究成果对于推动数据中心的能效优化和可持续发展具有积极的贡献。