谢徐超
- 作品数:35 被引量:12H指数:2
- 供职机构:国防科学技术大学更多>>
- 发文基金:国家自然科学基金国家高技术研究发展计划更多>>
- 相关领域:自动化与计算机技术电子电信更多>>
- 一种基于NVMeoF存储池的分域共享并发存储架构被引量:5
- 2020年
- E级计算和大数据时代,为了充分利用超级计算机系统的并行计算能力,许多大数据应用程序在高性能计算HPC系统上运行,超级计算机的I/O模式更趋复杂,I/O瓶颈问题日益严峻。当前基于闪存的存储阵列或存储服务器已逐步应用在高性能计算机的并行存储系统中,但传统存储体系结构、I/O协议软件栈和存储网络的较高延迟使得新型存储介质不能发挥性能优势,存储系统依然存在I/O访问延迟高、并发I/O吞吐率和瞬发I/O(Burst I/O)带宽受限的问题。针对上述问题和技术挑战,提出了一种基于非易失存储介质NVM的分域共享并发存储架构,设计了一种支持NVMeoF网络存储的Burst I/O缓冲存储池NV-BSP,实现了虚拟化存储池资源管理、基于天河高速互连网的NVMeoF网络存储通信等关键技术,具有横向和纵向扩展能力,可有效支持面向特定计算任务的Burst I/O加速和低延迟远程存储访问。基于HPC和大数据应用程序混合运行性能分析模型,提出了一种混合应用程序QoS控制策略。小规模验证系统上的性能测评结果表明:NV-BSP存储池的读写性能可随并发I/O处理线程数良好扩展;与Linux操作系统自带的MD-RAID相比具有明显的性能优势;相比本地I/O访问,基于天河互连网络的NVMeoF远程存储读写延迟仅增加了59.25μs和54.03μs。通过计算与存储分离,NV-BSP在提供堪比本地存储池性能的同时,提高了系统存储资源动态调配的灵活性和系统可靠性。
- 李琼宋振龙袁远谢徐超
- BeeGFS并行文件系统性能优化技术研究被引量:2
- 2020年
- 大数据和人工智能时代,超级计算中心或数据中心的存储需求从PB级向Exabyte级扩展,许多大数据和智能应用程序在高性能计算(HPC)系统上运行,新兴的深度学习应用程序具有批量小文件随机输入特点,使HPC系统的I/O模式更趋复杂,存储管理和I/O瓶颈问题日益突出。并行文件系统是管理超级计算机数据存储的有效手段,但传统并行文件系统主要面向高带宽需求的科学计算任务,难以满足智能应用程序存储需求。针对上述问题,以新兴的BeeGFS文件系统为基础,研究并行文件系统性能优化的关键技术。设计实现了基于键值存储的元数据管理模块以优化元数据IOPS,基于异步I/O和多线程技术的并行I/O处理模型以提升I/O处理并发度,并采用多轨通信机制以提高网络通信带宽。构建了IO500性能评测环境,在相同的配置环境下,I/O带宽和元数据2类基准测试结果表明,改进后的并行文件系统在元数据、数据读写性能上大幅提升,IO500测分是原有系统的2倍以上。
- 宋振龙李小芳李琼谢徐超魏登萍董勇王睿伯
- 关键词:并行文件系统
- 固态盘写性能优化技术研究
- NAND Flash的固态盘具有非易失,高性能,低功耗,可靠性高等优点,被视为替代现有机械硬盘的新型存储设备.但固态盘由于Flash存储介质的固有特性,导致了其随机写性能较差和使用寿命有限等问题,限制了固态盘在企业级服务...
- 宋振龙谢徐超刘妍肖立权
- 关键词:固态盘闪存转换层重复数据删除
- 基于RDMA完成事件的NVMeoF响应指令传输方法
- 本发明公开了一种基于RDMA完成事件的NVMeoF响应指令传输方法,本发明面向NVMeoF存储网络,首先,将数据传输和NVMeoF响应指令传输紧耦合,通过RDMA完成事件实现NVMeoF响应指令的传输,消除构建发送请求、...
- 谢徐超魏登萍宋振龙袁远张根乔星涵顾文豪
- 基于多维度监测数据的SSD寿命预测方法、装置及介质
- 本发明公开一种基于多维度监测数据的SSD寿命预测方法、装置及介质,该方法步骤包括:对SSD进行状态监控,获取多维度故障监测数据以及无法纠正的错误计数值,多维度故障监测数据包括多种影响SSD寿命的故障参数的监测数据;从获取...
- 张根谢徐超宋振龙袁远黎铁军魏登萍邢建英李志星周桐庆
- 物理地址感知的固态盘请求调度方法及装置
- 本发明公开了一种物理地址感知的固态盘请求调度方法及装置,本发明将I/O请求调度与固态盘闪存转换层协同设计,充分利用闪存转换层中的地址转换信息将I/O请求队列中可并行执行的闪存请求与冲突访问请求分离,引入可并行闪存请求组P...
- 李琼谢徐超袁远肖立权黎铁军魏登萍宋振龙蒋句平邢建英张凯邓峰
- 文献传递
- 固态盘闪存转换层优化技术研究
- 基于NAND Flash的固态盘凭借其低能耗、低故障率、高性能等优势,正逐步应用到企业级服务器和高性能计算领域。为保持主机对固态盘的访问接口与磁盘兼容,并有效解决NAND Flash的重写前擦除和擦除次数有限等固有特性引...
- 谢徐超
- 关键词:固态盘闪存转换层地址映射命中率
- 面向缓存的固态盘垃圾回收策略
- 垃圾回收操作是影响基于NAND Flash的固态盘性能的一个主要因素,现有垃圾回收操作大多是针对通用存储设备而设计的。当固态盘部署在存储系统中充当缓存时,数据读、写、替换操作更加频繁,迫切需要更加高效的垃圾回收策略,以充...
- 魏登萍谢徐超李琼
- 关键词:固态盘垃圾回收缓存
- 瓦记录磁盘感知的分层式混合存储方法及系统
- 本发明公开了一种瓦记录磁盘感知的分层式混合存储方法及系统,方法实施步骤包括将固态盘划分为固态盘区域并与主机感知型瓦记录磁盘的区域构成总的存储空间为上层提供连续的逻辑块地址;计算各个区域的关键访问频率并进行排序,根据排序结...
- 肖立权徐炜遐谢徐超李琼宋振龙魏登萍黎铁军袁远周恩强董勇郑义
- 文献传递
- 一种BMC固件自动适配主板传感器的方法及系统
- 本发明公开了一种BMC固件自动适配主板传感器的方法及系统,本发明BMC固件自动适配主板传感器的方法包括:S1,面向指定的常用传感器进行传感器知识库构建;S2,通过对特定主板的网表文件进行解析识别出主板上的传感器,并从传感...
- 袁远李志星何静邢建英周桐庆谢徐超宋振龙魏登萍张根