DOITAPP
DOIT数据智能产业媒体与服务平台
立即打开
DOITAPP
DOIT数据智能产业媒体与服务平台
立即打开

手握自主研发分布式文件系统,达沃时代为VSAN加入集群NAS功能

虚拟化巨擘VMware与国内存储初创公司达沃时代达成一项方案合作,由后者为前者的明星产品VSAN加入集群NAS功能。一个是市值400亿美金的世界级IT巨头,一个是成立仅六年的中国本土存储企业——达沃时代,这两者的合作有哪些值得为外人道的呢?

一次国际巨头与国内初创公司的合作

VSAN(Virtual Storage Area Network)是VMware近来主推的存储子系统,今年2月份刚进行了一次更新,增加了重复数据删除(仅限闪存)、压缩和QoS等功能。从技术角度来说,VSAN属于SAN存储类型,主要为ESXi提供“块”存储资源,但是,一些VSAN用户还需要文件处理能力。所以,达沃时代针对这个需求开发了VNAS服务。顾名思义,VNAS是一种虚拟NAS,它运行在VMware虚拟机中,对外提供标准NAS接口,同时提供集群式NAS服务。

作为VSAN存储方案的一种选择,VNAS使用自主研发的分布式文件系统,利用通过VSAN虚拟出来的硬盘资源。VNAS对外提供标准NFS/CIFS接口,同时,实现更为丰富的功能,如应用就近访问网络数据、访问集群内共享数据、统一管理数据命名空间和访问权限、高可用的NAS服务、多级数据保护等,并提供基于Web界面的一键部署和管理监控功能。

图片 1
另外,除标准的NFS/CIFS接口外,VNAS还为客户提供Posix客户端,为应用提供符合工业标准的Posix接口,上层应用无须修改,像使用本地文件系统一样,使用VNAS。Posix接口的最大优势是避免不必要的协议处理,特别是在超融合平台下,降低对CPU资源的占用和处理延迟,因此,在性能和可靠性上,Posix接口相比NFS/CIFS有很大提升,更充分地发挥了VSAN的能力。

VSAN的用户需要文件存储,达沃时代的VNAS为VMware提供了一个方案选择,双方合作是水到渠成的事情。于是新的问题来了,做分布式存储的那么多,VMware为什么要与达沃时代合作呢?

自主研发的分布式文件系统

达沃时代公司副总裁、技术总监雷迎春博士认为,主要是因为达沃时代自身在存储方面拥有较强的技术优势。

这一技术优势主要体现在达沃时代在分布式文件系统上的工作。雷博士介绍说,国内自研分布式文件系统的友商比较少,大多数存储公司的工作重心都在“块”存储上;一些公司虽然提供分布式文件系统产品,但是,是基于开源的GlusterFS或者CephFS居多,很多情况下,开源存储系统如果不做深入的研发工作是很难交付给企业用户使用的。另外一些优秀的企业级分布式文件系统,如EMC Isilon和Veritas VxFS,或者与硬件绑定,构成硬软一体的产品,或者因为销售策略的原因,暂时不支持部署在虚拟化环境中。

为什么自主研发做分布式文件系统的这么少?答案很简单,就是技术上有难点。简而言之,每一个文件系统的操作都涉及一系列十分复杂繁琐的过程,而当把文件系统做成分布式之后的操作更是难上加难,雷博士介绍说这种难度呈指数级的变化。但是,文件接口对应用来说是一种使用存储资源的重要途径——无论是物理机,还是容器、虚拟机为载体,文件存储在数据共享方面都非常重要,必然具备一定的商业价值。
虽然业内已经有一些开源的分布式文件存储系统如HDFS,在应用场景上能满足大部分的需求,但也有一些研究资料指出HDFS的各种不适应性,比如HDFS主要是为达到高数据吞吐量而设计,在低时延的应用需求满足上有缺陷,不支持随机读写,或者在大量小文件的存储效率上不高等等。

此外,任何一个软件都有一定概率会宕机,宕机后能否恢复数据最为关键,雷博士认为企业用户部署关键应用后服务商应该为数据的可靠性负责,如果这个软件不是自己写的话,宕机后的数据恢复是一个潜在问题——互联网企业支付了大量的人力成本来维护系统和数据的可靠性,而传统企业在缺少大量技术人员的情况下,则更倾向于使用成熟、稳定的商业软件来满足自身的需求。

基于上述种种考虑,达沃时代一行一行地写出了自己的分布式文件系统产品,在保证数据读写速度的同时,强调数据的高可靠性和高可用性,并且可以支持多种虚拟化平台。这其中就包括VNAS,在获得VMware的认证后,就有了这次合作。

达沃时代将进入主流市场

从自主开发软件系统就不难认识到,达沃时代是一家技术驱动的初创公司。谈到企业未来的发展规划时,雷博士表示达沃时代的发展目标是力图为企业提供一站式数据服务。

目前达沃已经在分布式元数据、SSDs/HDDs混合调度方面取得多项专有技术突破,推出了新一代存储软件产品YeeSAN、YeeFS和广域存储产品WooStor,并在公安、教育等多个行业和大型项目中得到应用。
在采访中雷博士表示,公司今年会面向更多行业提供解决方案,把自身在分布式存储和数据服务方面沉淀下来的技术经验应用到更多行业中去。

除了这次与VMware的合作外,未来还会通过与更多知名厂商的合作来进入到主流行业,比如金融或是电信,从而进入主流市场。

未经允许不得转载:DOIT » 手握自主研发分布式文件系统,达沃时代为VSAN加入集群NAS功能