Xilinx社区
首页 > Steve专栏 > 不走寻常路的百度“软件定义闪存”SSD架构
Steve专栏
不走寻常路的百度“软件定义闪存”SSD架构
来源:  时间:2015-06-02  浏览量:1433
固态硬盘(SSD)工程师吉姆·汉迪在一次报告中指出,中国领先的互联网搜索引擎公司——百度,创建了一个名为“软件定义闪存”(SDF)的SSD架构。该架构最大限度地利用了SSD闪存存储芯片的固有性能。通过将闪存芯片的单个通道开放给主机服务器上运行的软件,可允许服务器建立自己的数据,从而更好地安排数据访问。吉姆还指出,百度的设计方法从闪存芯片中提取了95%的原始带宽,同时将99%的闪存存储容量用于用户数据。在去年盐湖城举办的ASPLOS会议上发表了题为“SDF:用于网络存储系统的软件定义闪存”一文,文中展示了上述的研究成果。

百度的数据中心可存储数以百计的千兆数据,每天的数据处理量可达到几十个千兆字节。随着存储系统的性能要求越来越高,百度发现,硬盘和传统的SSD变得越来越不适用。SDF则是百度公司提高数据中心性能而采取的最新举措。

像SDF这样全新的基于闪存的存储架构不能使用传统的SSD控制器ASSP,因此,开发团队自主研发了SDF架构,并基于Xilinx Virtex-5和Spartan-6 FPGA建立了一个 PCIe SDF开发板,如下图所示:

Baidu SDF controller architecture.jpg

百度SDF控制器架构

Virtex-5 FPGA应用了SDF的PCIe DMA和接口,在FPGA中进行芯片对芯片的桥接,并且其还是四个Spartan-6 FPGA的主控器。每个开发板有44个通道,而每个Spartan-6 FPGA可以实现其中11个独立闪存转换层(FTL)控制通道。每个闪存通道可控制两个Micron 8Gbyte MLC闪存芯片,因此每个SDF开发板的总容量有704Gbyte。

 设计团队为降低开发板成本做出了很大的努力,为适用于通用的存储和不同的工作负载,在其设计中融合了与商用SSD截然不同的特性。例如,SDF主要作为很少访问的硬盘缓存和数据使用,不会在缓存中驻留太长时间,因此SDF不能进行静态平均读写。

 此外,SDF硬件不包括DRAM缓存,而传统的SSD为缩短数据访问时间通常包含大量的DRAM缓存。数据驻留在DRAM缓存中时,供电故障可能会影响数据的一致性,因此缓存控制器的设计中必须包含一个电池或电容,使其可以度过断电期或允许一段时间的断电,以防止数据损失。然而,电池和电容却增加了硬件成本。在百度的存储基础设施中,服务器主机内存可以缓存最近访问的数据,因此SDF设计排除了DRAM缓存,高速缓存存储器的相关成本也由此降低。

百度的研发人员为SDF设计进行了大量的基准测试,本文进行了详细论述。总结如下:
“试验测量表明,SDF可提供95%的原始闪存带宽和99%的用户数据闪存容量。SDF增加了3倍I/O带宽,且相比百度的商用SSD系统,SDF平均降低了50%的每节次比硬件成本。”

原文链接:http://forums.xilinx.com/t5/Xcell-Daily-Blog/Baidu-s-Software-Defined-Fl...

 © Copyright 2014 Xilinx Inc

如需转载,请注明出处

热点文章
精选视频
推荐资源

中国授权培训机构

北京 电话:(010)82757632
      (010) 62192881
深圳 电话:(0755)86186715
武汉 电话:(027)61389792
成都 电话:(028)80821007
南京 电话:(025)66022032
西安 电话:(029)82230498
邮箱:sales@e-elements.com

中国授权经销商

香港 电话:(852)22127848
北京 电话:(010)84148118
成都 电话:(028)86528262
上海 电话:(021)33678387
深圳 电话:(0755)26584925
武汉 电话:(027)87322806
邮箱:china@avent.com
深圳 电话:(0755)26743210
上海 电话:(021)51696680
北京 电话:(010)51726678
成都 电话:(028)85139576
武汉 电话:(027)87690155
邮箱:
xilinx_enquiry@comtech.com.cn

社区主办


《电子产品世界》杂志社

内容提供


    赛灵思公司

Copyright ©2000-2015 ELECTRONIC ENGINEERING & PRODUCT WORLD. All rights reserved.
京ICP备12027778号-2 北京市公安局备案:1101082052