基于用户级融合I/O的Key-Value存储系统优化技术研究

	基于用户级融合I/O的Key-Value存储系统优化技术研究
	安仲奇 1; 张云尧 1; 邢晶 1; 霍志刚 1
	2020
发表期刊	计算机研究与发展
ISSN	1000-1239
卷号	57.0 期号:003 页码:649
摘要	传统分布式键值存储系统大都基于操作系统提供的套接字与可移植操作系统接口构建,受限于接口语义及内核开销,难以发挥底层新型网络和存储硬件高吞吐与低延迟的性能优势.聚焦键值存储系统的数据通路,面向高速以太网与NVMe(non-volatile memory express)固态存储,于用户态整合网络栈与I/O栈,协同设计以优化吞吐性能与延迟稳定性.用户级融合I/O栈的控制平面由同一处理器核心于同一上下文中统一管理网卡与固态存储设备的硬件队列,消除了传统分离式设计所导致的多次进出内核态、多次上下文切换以及潜在的核间通信与数据迁移等的弊端,最大限度降低系统软件层面的管控开销.数据平面采用统一的内存池,借助用户级设备驱动,数据于上层键值系统与底层设备之间直接通过DMA传输,没有额外数据拷贝与操作系统干涉.针对大消息访问请求,通过将数据分片并交叠执行网络与存储DMA操作,进一步掩藏了访问延迟.实现了全用户态键值存储系统UKV,支持内存外存2层存储以及广泛应用的Memcache接口.将UKV与由Twitter开源的Fatcache系统进行了测试对比.实验结果表明,涉及外存的SET请求的每秒查询吞吐量提高了14.97%~97.78%,GET操作的每秒查询吞吐量提高了14.60%~51.81%;涉及外存的SET操作的p95延迟降低了26.12%~40.90%,GET操作的p95延迟降低了15.10%~24.36%.
关键词	键值存储系统旁路内核用户级融合I/O 高速以太网 NVMe固态硬盘
语种	英语
文献类型	期刊论文
条目标识符	http://119.78.100.204/handle/2XEOYT63/35566
专题	中国科学院计算技术研究所期刊论文_中文
作者单位	1.中国科学院计算技术研究所 2.中国科学院大学
第一作者单位	中国科学院计算技术研究所
推荐引用方式 GB/T 7714	安仲奇,张云尧,邢晶,等. 基于用户级融合I/O的Key-Value存储系统优化技术研究[J]. 计算机研究与发展,2020,57.0(003):649.
APA	安仲奇,张云尧,邢晶,&霍志刚.(2020).基于用户级融合I/O的Key-Value存储系统优化技术研究.计算机研究与发展,57.0(003),649.
MLA	安仲奇,et al."基于用户级融合I/O的Key-Value存储系统优化技术研究".计算机研究与发展 57.0.003(2020):649.