硬核|深信服分布式存储通过泰尔实验室压力测试,多项指标成业界标杆!
存储成本高、扩容难?
当数据量达到一定程度时,性能严重衰减?
可靠性保障只能被动防御,不能主动出击?
这款分布式存储,让问题迎刃而解。
︾
︾
日前,深信服企业级分布式存储EDS正式通过中国泰尔实验室权威机构测试验证。本次测试,泰尔实验室对深信服分布式存储EDS的性能、可靠性、海量文件处理能力、多中心部署等20项能力进行了严格的验证。在此20项测试指标中,深信服EDS均拿下优良成绩。
尤其在性能测试中,深信服EDS 3节点标准配置实现高达34万以上的IOPS(图1);轻松承载100亿小文件 (图2),且性能抖动不超过5%;对象上传速度达到15,000个/s(图3),对象下载速度达到40,000个/s,一跃成为了存储业界性能标杆。
中国泰尔实验室
中国泰尔实验室是国内 的通信产业测试机构,由信息产业部和国家质量监督检验检疫总局授权设立,主要面向通信技术、标准研究,产品测试验证等方向的科研机构,是目前中国通信技术领域 权威的评测机构之一。
你知道么?深信服EDS在3节点标准配置下,块存储性能4KB随机读达到34W IOPS,可以媲美传统中端全闪存存储,但成本节省一半!
深信服分布式存储EDS的块存储在3节点,每节点配置2块SSD+6块HDD的环境下,跑出了传统中端SAN存储29块SSD的性能参数,4KB随机读达到34W IOPS,可以支持2,000用户对Oracle数据库进行并发访问(TPM达到40万)。这其中的核心技术包括 分层技术与智能淘汰算法,以及 自适应条带化技术。
深信服EDS通过自适应条带化技术将一块连续的数据切分成很多个小的数据块,然后并发地存储到不同物理硬盘上,实现对数据进行写入或读取时可以获得 大程度上的I/O 并发能力。在向不同物理硬盘存储数据时,分层技术与智能淘汰算法派上用场。分层技术包括三层机制,即内存、SSD、HDD,并以此区分存储资源性能。再通过智能淘汰算法,将热点数据通过副本的方式保存到SSD高性能存储资源中,提供高效的读写缓存能力。分层技术与智能淘汰算法充分发挥了SSD性能,从而大幅提高IOPS。
在块存储应用场景中,深信服EDS通过自适应条带化技术,再结合SSD与HDD的完美搭配,可以将随机读写的速度提高3-5倍。通过实际对比测试,深信服EDS采用3节点的2U存储设备,性能就可以媲美传统中端全闪存存储,建设成本至少节省一半。
你知道么?深信服EDS在3节点标准配置下,对象存储可以承载100亿个小文件,且100亿时性能抖动不超过5%!
100亿个小文件相当于某个城市1万个摄像头,每个摄像头每天抓拍1万张照片,累积3个月产生的照片数量,意味着有几百亿甚至上千亿的元数据,深信服EDS能高效处理如此海量的元数据,具备极高的性能和承载能力。
为此,深信服分布式存储EDS创新推出分布式数据库PhxKV。PhxKV具备 的性能扩展能力,EDS通过分布式数据库PhxKV承载元数据,使得存储集群在处理海量小文件时具备更高的性能与更 的性能稳定性,性能抖动不超过5%,为EDS在高效处理百亿级海量小文件的场景下发挥了重要作用,已经成为行业 。
你知道么?深信服EDS在3节点标准配置下,对象存储在100亿级别小文件规模下,性能达到上传15,000个/s,下载40,000个/s,相比业内对象存储产品,取得突破!
深信服分布式存储EDS的对象存储在100亿规模小文件场景下的上传下载性能,得益于 智能缓存和小对象合并的技术突破,3节点性能达到上传15,000个/s(相当于15,000个摄像 头,每秒各抓拍1张照片同时上传至存储系统),下载40,000个/s,与业内其他厂家的对象存储产品进行POC对比,有更好的表现。
随着非结构化数据的爆发式增长,传统存储很容易面临着文件数量增长而性能急剧下降的难题。深信服EDS在海量小文件场景下依然保持高效的存取能力:
在文件上传场景下,EDS通过智能缓存技术将大文件直接写入HDD,而将小文件追加写入SSD中即返回,并在此过程中同时将小文件在线合并为一个EC满分条,然后按每个条带(大IO)写入HDD,极大地提高了文件上传性能。
在文件下载场景下,EDS利用SSD进行文件汇聚,并保留元数据在智能缓存中,减少系统频繁访问HDD的性能开销,大幅提升了文件下载性能。
你知道么?深信服EDS在面对磁盘和主机叠加故障时,平台依旧稳定运行,不为所动!
在测试中,深信服分布式存储EDS经受了中国泰尔实验室长时间的稳定性考验。在3节点EDS集群中,断电一台主机,同时再拔掉一块剩余节点的磁盘,模拟极端情况下的故障叠加,EDS依然可以做到故障自动切换,保障平台稳定,这归功于EDS健全的可靠性机制。
传统存储的可靠性一般是通过冗余机制来达成,比如双控、RAID、热备盘等。分布式存储有多副本、纠删码、快照复制、多数据中心等技术,但这还是相对被动的保护方式。
深信服EDS除了具备传统被动式保护机制之外,增加了多重主动防御能力来保障整个平台的高可靠性。
举个例子,硬盘属于易损件,在出故障前会有一段时间的亚健康状态。处于亚健康状态的硬盘,业务依旧可以运行,但体验、性能比正常要差一些,比如频繁抖动、时延变高、温度升高等。
深信服EDS可以通过AI智能检测系统,尽早发现寿命即将完结的SSD硬盘或者出现慢盘的硬盘,并 时间给管理员告警。并且经过长时间和大量的错误代码训练,深信服EDS AI智能检测准确率高达98.5%。通过这种主动防御,EDS能做到防患于未然,避免突发故障造成的业务访问中断,可靠性完胜传统存储。
你知道么?深信服EDS虽然是深信服推出的新品,但实际上深信服在存储领域已经有超过5年的技术积累和实践。
2013年深信服存储就成立独立研发部门,为各个产品线提供存储技术支撑;2014年开始应用于桌面云的数据承载;2015年又应用于超融合平台,并在当年就完成了 个Oracle RAC项目的交付。
目前已经有大量用户采用深信服分布式存储EDS来支撑桌面虚拟化和数据中心业务,其中桌面虚拟化终端用户超过95万(截至2019年6月底);超融合用户超过5,000家,且有超过一半的用户用于承载数据库等核心业务。深信服EDS通过大规模部署实践和经验积累,长期稳定、可靠承载用户业务数据,成为政府、教育、制造、广电、医疗、金融等行业用户信赖的存储方案。
你知道么?深信服EDS一直在大步跨越,创造惊喜,助力云存储、海量非结构化数据存储等场景用户 通过“一套架构”实现块、对象、文件和数据服务的有效整合,带给用户极简、可靠、高性能的品质存储体验。
附(深信服EDS中国泰尔实验室测试内容及结果):