| 面向分层混合存储架构的协同式突发缓冲技术 |
| |
| 引用本文： | 周恩强,张伟,董勇,卢宇彤.面向分层混合存储架构的协同式突发缓冲技术[J].国防科技大学学报,2015,37(1):47-52. |
| |
| 作者姓名： | 周恩强 张伟 董勇 卢宇彤 |
| |
| 作者单位： | 国防科技大学 高性能计算国家重点实验室,湖南 长沙,410073 |
| |
| 基金项目： | 国家自然科学基金项目（面上项目，重点项目，重大项目）;国家高技术研究发展计划（863计划） |
| |
| 摘 要： | 科学计算产生和分析的数据规模日益增长,高性能计算机的存储系统在体系架构和软件管理方法上面临重大挑战。针对天河-2系统的新型分层混合存储架构,提出一种由应用程序耦合的协同式突发缓冲技术来有效利用其存储资源优势。该方法采用运行时动态耦合的方法,将临近计算任务的分布式高速存储资源聚合成为一个的巨大的协同式突发缓冲区,通过采用文件命名空间投影的映射方法组织全局数据视图,利用位置亲和和感知数据意图的方法来挖掘空间局部性和时间局部性,并利用应用并发度感知的策略优化数据移动效率。天河-2系统的测试结果表明,该方法能够有效优化多种典型应用场景,可获得高可扩展的突发并行输出带宽和稳定的持续并行输出带宽,可显著提升数据分析场景的输入/输出性能,适合应用于大规模超级计算机的存储系统。
|
| 关 键 词： | 超级计算机 存储架构 并行文件系统 突发缓冲区 |
| 收稿时间： | 2014/6/11 0:00:00 |
| 修稿时间： | 7/8/2014 12:00:00 AM |
Research on Optimization towards hybrid and hierarchy storage architecture |
| |
| ZHOU Enqiang,ZHANG Wei,DONG Yong and LU Yutong.Research on Optimization towards hybrid and hierarchy storage architecture[J].Journal of National University of Defense Technology,2015,37(1):47-52. |
| |
| Authors: | ZHOU Enqiang ZHANG Wei DONG Yong and LU Yutong |
| |
| Institution: | State Key Laboratory of High Performance Computing, National University of Defense Technology, Changsha 410073, China;State Key Laboratory of High Performance Computing, National University of Defense Technology, Changsha 410073, China;State Key Laboratory of High Performance Computing, National University of Defense Technology, Changsha 410073, China;State Key Laboratory of High Performance Computing, National University of Defense Technology, Changsha 410073, China |
| |
| Abstract: | |
| |
| Keywords: | Supercomputer Storage Architecture Parallel File System Burst Buffer |
| 本文献已被 CNKI 万方数据 等数据库收录！ |
| 点击此处可从《国防科技大学学报》浏览原始摘要信息 |
| 点击此处可从《国防科技大学学报》下载免费的PDF全文 |
|
