乘风破浪亦能不负众望,在科技迭代迅速推进的当下,企业级存储市场发生深刻变革的今天,青云QingCloud又是如何披荆斩棘、另辟蹊径,将QingStor打造成为一款真正面向企业数字化全场景的存储产品呢?
十年岁月 市场巨变
过去10年里,包括移动互联网、大数据、5G、AIoT等新兴技术应用场景对高容量存储、复杂场景(如云计算)的存储提出新的需求。分布式存储正因为场景的不同正在经历快速的增长,IDC 2019年市场预测报告显示,无论是对象存储、文件存储还是块存储,在未来几年里都会保持两位数高速增长。如今的企业内部分布式存储部署的占比越来越重,甚至在一些企业里超过了传统存储。
同时,全闪存储逐渐成为主流。在所有采用存储的企业里,全闪存储几乎已经占80%的使用率,且未来几乎每年都会保持50%的高增速。SSD全闪介质的成本正在逐年快速下降,是企业采用全闪存储最主要的驱动力。
在当下的经济背景以及世界格局下,国产化已经成为IT厂商和企业客户关注的重点。QingStor很早就关注到国产化的重要性,此次QingStor升级发布最核心的是把存储全栈产品线进行国产化。除了软件架构的部分,底层的芯片和操作系统,也跟很多国产化厂商进行合作和互认证。值得一提的是,QingStor 分布式存储已经全面适配国产化软硬件平台,完成与鲲鹏、飞腾、中科海光、浪潮 OpenPower 等国产芯片的兼容适配测试,实现对统信 UOS、麒麟、欧拉等主要国产操作系统的兼容对接。从软件架构、底层芯片到操作系统,QingStor 已经全面实现和国产化厂商的兼容、互认证,构建起国产化生态,有效地消除了企业客户在当下复杂的经济背景和世界格局下对数据安全的顾虑和担忧。
为云设计 为云而生
从2012年青云QingCloud推出第一个版本的云计算产品开始,就在存储的底层坚持100%自研,QingStor全线产品都是从零开始,自主设计、自主研发。与国内众多厂商基于开源的分布式存储作为底层进行二次封装和二次开发,QingStor从架构设计阶段就与之有本质的不同。目前,QingStor产品家族里有四款专业存储产品,共同支撑市面上几乎全部主流的云计算产品。
QingStor存储产品线研发负责人王煜
青云QingCloud的产品,包括公有云、私有云等,都是由QingStor作为底层存储来支撑。而跟其他存储产品最大的不同在于,QingStor在公有云和私有云是采用同一套架构,同一套代码实现的。可以说,QingStor全线产品是经过公有云和私有云共同的检验,得到大规模生产环境验证的。
同时,青云QingStor能够对接多个主流的平台,包括VMware虚拟化平台、OpenStack云平台、目前容器领域最火的Kubernetes容器平台等。作为底层存储引擎,可以说QingStor是“为云设计、为云而生”的一款产品。
前路艰辛 自研不改
尽管市面上存在许多开源存储的方式,但没有一款能完全匹配企业核心业务上云的严格要求。不仅仅是传统存储对性能、稳定性的要求,更多的是云计算中复杂场景下对于安全性、隔离性、大规模水平扩展能力的要求。
几乎所有开源的存储或者基于开源存储的商业存储产品,都有通用的、统一的存储底层,比如Ceph,有一个叫做Radows的对象存储系统作为底层,向上封装各种不同的存储接口。但由于Ceph本身在性能上的弊端,很难承载企业客户关键性的核心业务。除此之外,HDFS是Google 2006年GFS论文的开源实现,它的单点问题、扩展性问题,对互联网大数据的场景并不通用。HDFS的底层是一个单机文件系统,并没有做太多的改造。所以单机文件系统本身存在的问题,如海量小文件的问题,HDFS也存在。
作为一家中国企业,青云QingCloud更希望能够为中国客户提供全栈自主可控的优质产品,消除企业对数据安全的顾虑,满足企业核心业务上云的需求。
与众不同 独自生长
当前,QingStor存储家族总共有四款产品:QingStor NeonSAN(分布式块存储)、QingStor对象存储、QingStor文件存储、QingStor融合存储,每一款存储产品都独立进行架构设计和开发。
企业的存储场景复杂多样,极致性能、大容量、高IOPS、高吞吐、通用接口等许多需求不存在一种架构设计能够完全满足所有存储场景。QingStor在技术设计时,采用缩短I/O路径栈、去掉本地文件系统、提高协议转换效率等方法,打造了一款拥有极致性能的分布式SAN存储产品。正是因为这样的设计,QingStor NeonSAN能够稳定地支撑企业的核心业务,比如核心数据库Oracle RAC。到目前为止,市面上可以很稳定、快速地跑Oracle RAC的,几乎全都是传统存储。在分布式存储里,QingStor NeonSAN应该是第一款,也是唯一一款能够很好支持Oracle RAC的存储产品。
QingStor 对象存储产品经理 贾斌
对象存储是分布式存储领域里一个新晋派系,它解决非结构化数据存储的问题,如海量图片、音视频、日志、归档备份等需要一次写入、多次读取的模型。这些数据的特点在于读取频率不高,而数据容量、数据数量极大。因此,QingStor对象存储设计的核心是承载海量的数据。这次发布的3.0版本,采用完全Share-Nothing的架构,没有任何单点,每一个组件都是可以无限水平扩展。这一版本的单bucket(存储桶)可以在支撑100亿个对象的同时,性能还不会有所下降——这是非常难得的。
如果存储技术是整个IT技术的皇冠,文件存储应该是皇冠上的明珠。文件存储在技术架构的实现是非常复杂和艰难的,目前在世界范围内能把文件存储,尤其是能够做好一款分布式文件存储的厂商很少。QingStor文件存储2.0版本,是为通用场景设计的,接口协议部分可以完整支持POSIX语义接口,从而帮助企业零成本无缝对接企业内部各种应用系统。
一些企业之所以会采用Ceph,通常是想一次采购获得多种存储类型和存储接口,承载各种业务,甚至是他们还不能预期的一些业务。青云QingCloud在CIC 2019云计算峰会上发布了QingStor融合存储这样一款高性价比的产品,虽然将前述三款专业存储在部署层面上做了整合,但是在架构层面上依然保持每一个专业存储本身的架构特点,底层存储池融合在QingStor NeonSAN块存储中,使用统一的管理界面进行管理。QingStor融合存储与Ceph最大的区别,也是本质区别——它是一款不妥协的融合存储。这一产品希望给用户提供统一管理体验,即提供统一存储池的同时,还能完完整整地享受到前三款专业存储的功能和性能。
重磅升级 持续赋能
全新升级了的管理平台Portal 3.0,究竟有哪些不同?
与去年发布的2.0版本相比,3.0版本实现了存储后台的统一管理,可以用同一个管理后台管理所有存储产品。而且运用了很多创新的图形元素的方式,来增强企业运维人员对存储的理解。此外,增加了硬盘健康状况预警功能,对硬盘本身的各种指标抓取做分析,帮助运维人员提早预测系统内部可能发生的故障,从而规避故障问题。
从1.0版本到现在的3.0版本,QingStor NeonSAN 整个产品迭代都在围绕核心场景打造产品的能力。云平台/虚拟化、大数据、业务连续性以及容器/云原生,四大场景持续赋能,QingStor NeonSAN分布式块存储全新升级的版本,又有哪些特色?
“QingStor NeonSAN、甚至QingStor整个产品线,都脱胎于云服务,天生就可以很好地对接云平台”,QingStor存储产品线研发负责人王煜介绍到。除了获得了VMware存储的官方认证外,OpenStack平台、Hyper-V平台等业界使用比较多的虚拟化平台、云计算平台,QingStor NeonSAN均能实现兼容与对接。
针对大数据场景,QingStor NeonSAN 做了特殊设计,如提供互斥卷组的策略来保证存储的使用率,不造成存储空间的浪费。
青云QingCloud 能提供一整套以存储为核心能力的业务连续性解决方案,满足企业对于底层IT系统具备高可用、灾难恢复、连续操作能力的需求,简化了业务连续性的管理,提高业务连续性的效率。
QingStor存储产品线产品经理冯相东
为了解决云原生场景中容器持久化储存问题,青云QingCloud 助力容器平台、K8s平台,包括自有的KubeSphere平台落地生产,提供高性能、可靠性、企业级分布式存储的能力。在软件层面之外,为了帮助企业级用户快速落地容器平台,推出了KubeSphere KF3000容器一体机,KubeSphere与QingStor NeonSAN两款产品强强联合,提供整体的商用级服务。
对于场景能力的提升,QingStor NeonSAN的版本代代更迭,逐渐将产品打磨到极致。使得目前在市面上所有的同类产品,只有青云QingCloud可以为企业级市场提供容器平台商业化能力的同时,又具备国内比较领先的分布式存储能力。
不负众望的 QingStor NeonSAN 3.0版本,四大新增功能亮点满满:一,异构存储池支持。二,卷粒度的QoS。三,在协议层面的全 RDMA 互联。四,对于业界最主流的 NVMeoF 协议的支持。通过多项优化,在效率、运维、用户使用友好性等方面,青云QingStor 也在不断拥抱新的可能。
此外,青云QingCloud重磅推出的QingStor NF6000分布式全闪存储一体机,看似很平常的硬件配置,通过最小规模的3节点集群,给客户3节点100万IOPS的性能指标,并且保证时延在0.5毫秒以下。基于标准的x86服务器、普通的硬件配置、普通的以太网络,以高性价比的硬件形态提供给用户。该指标是业界主流的中高端全闪阵列性能指标,体现了QingStor NF6000分布式全闪存储一体机最大的价值。
鱼与熊掌 二者得兼
面对日益增长的庞大数量的非结构化数据,需要有一个健壮、开放且成本合理的存储来承载,对于对象存储来说,如果要想服务好当下和未来的业务场景,势必要解决海量存储和超高性能共存的问题。
QingStor对象存储3.0 在海量数据存储能力、整体超高性能、存储系统开放能力,这三个方向上做重点突破。在数据迁移、数据保护、数据备份、AI视频监控等更多数据场景, 以更强大、更具优势的存储性能,提供存储海量数据和数据存储的超高性能兼得的存储服务。
QingStor 文件存储研发负责人 黄蒙
QingStor 分布式存储为云而生,经过 8 年锻造,已得到数万企业客户的肯定和认可。此次全面升级,将引领分布式存储的前沿发展,解决企业客户海量数据存储、共享、应用难题,实现海量数据存储能力、整体超高性能、存储系统开放能力的共存。从产品定位到架构设计原则,青云QingCloud 坚持自主研发、自主设计,旨在帮助更多类型的应用更平滑上云,享受到更好的云计算基础设施带来的便利。在国产化背景下,QingStor 存储家族也将能够为企业坚定信心,给客户更多国产化落地的选择,助力企业在数字转型的市场中乘风破浪。