计算存储融合:从高性能计算到大数据 |
| |
引用本文: | 殷进勇,杨阳,徐振朋,姚小城,曾玮妮.计算存储融合:从高性能计算到大数据[J].指挥控制与仿真,2015(3):1-7. |
| |
作者姓名: | 殷进勇 杨阳 徐振朋 姚小城 曾玮妮 |
| |
作者单位: | 江苏自动化研究所 |
| |
摘 要: | 随着军事信息化建设,物联网广泛应用于战场感知、智能控制等军事领域,产生了海量的半结构化、非结构化的数据,受到I/O性能尤其是网络传输、硬盘读写的限制,传统的计算系统难以满足海量数据处理的应用需求。因此,提出了一种计算存储融合方法,通过扩展Linux内核,将集群内所有节点上的内存、处理器等计算存储资源在系统空间映射成一个统一的资源池,实现了单一进程空间和单一内存空间,并在内存空间内建立一个分布式内存文件系统。计算时可将数据完全加载到内存中,计算过程中仅与内存文件系统交互,避免了硬盘读写对系统性能的影响;另外,通过进程迁移,避免了节点之间的大量数据传输。实验结果表明,该方法对数据密集型计算是有效的,能够大幅提升系统的计算性能。
|
关 键 词: | 计算存储融合 内存计算 进程迁移 分布式内存文件系统 |
The Fusion of Computing and Storage:From HP C to Big Data |
| |
Abstract: | |
| |
Keywords: | |
本文献已被 CNKI 万方数据 等数据库收录! |
|