华为云存储技术将成就不凡微秒时代

发布时间:2019-07-12

阅读量:751

在云计算的世界里,如果云厂商有能力将服务水平提升一个等级,则意味着在未来一段时间里,将具备差异化竞争力,也很容易在市场中形成独树一帜的优势。

华为云存储就在云计算基础服务领域中干着这样一件事情。近日,在“成都·选择不凡-华为云城市峰会2019”上,华为云正式发布存储All-Flash战略,并推出战略落地的首款产品——全新一代极速IO云硬盘,这标志着华为云在存储这项基础云服务上实现了大幅的性能提升,率先引领云上存储从毫秒进入到微秒时代。在华为云看来,以Flash介质替代HDD、数据处理从毫秒进入到微秒,背后是存储架构、芯片、算法等一系列技术的重构与突破。

      华为云之所以如此果敢地率先选择全面拥抱Flash,乃是时势所趋。在5GIoT以及AI等技术快速崛起以及技术叠加效应日趋突显之际,市场大幅推动了应用对于实时性的需求。因此,云服务提供商必须要具备提供更低时延、更大带宽的数据基础存取能力,并以智能化的方式去帮助用户挖掘数据价值。

“5G时代,瓶颈将不再是广域网。”5G带来的不仅仅是传输带宽和速率的大幅提升,更会对云、边、端进行全面的重构。随着传输带宽和速度实现质的飞跃,像AR/VR、自动驾驶、人脸识别等应用会大量出现,随之而来的数据洪流以及数据处理则对时延提出了进一步的需求。

首先,Flash的成本正在持续下降。根据知名市场调研公司TrendFocus的数据显示,今年一季度硬盘货量同比下滑13%,而SSD 每GB的成本则是持续下降。“这么多年过去了,机械硬盘的时延始终还是4毫秒,我们必须用新一代技术去降低时延。”张宇昕表示,“用Flash逐步代替机械硬盘是大势所趋,从业界的报告来看,今年全球Flash无论是从容量、收入都将超过机械硬盘。

      Flash自身的发展趋势也是容量越来越大、成本越来越低。因此,在未来的云中,Flash将会占据绝大部分存储介质。”

为此,华为云打造出全新一代智能数据底座来实现All-Flash战略,满足各类新兴应用对数据实时性的诉求,引领云上存储从毫秒走向微秒时代。华为云的智能数据底座包括引擎、架构、芯片、算法和AI五个部分,概括起来即为“两个创新+三个加持”。“两个创新”为全新Flash-Native存储引擎和全栈架构创新,而“三个加持”则是全系列自研芯片、硬核数学算法以及AI加持。

据介绍,全新Flash-NaTIve存储引擎完全为Flash而设计,针对Flash本身具有擦除寿命、不支持覆盖写等限制,Flash-NaTIve存储引擎采用Flash友好的数据布局,可提升Flash寿命5倍以上,数据持久性高达11个9。Flash-NaTIve存储引擎还可支持不同负载的应用,充分发挥了多核调度优势并保证数据读写路径最优,带来低于百微秒的时延与百倍以上并发访问性能的提升。

而全新的全栈架构则可以让Flash发挥极致性能和效能,通过全栈架构创新实现数据IO与控制分离,让芯片重构数据读写,让软件实现智能调度,使得IO路径最短,时延最低。数据中心层面,通过优化的极简扁平网络,实现1:1无阻塞、无收敛比网络;并通过如液冷技术、AI控温、模块化数据中心等来进一步减少能耗,践行绿色环保。

“三个加持”首先体现在华为云可以充分利用全系列自研芯片的优势,从“算、传、存、智”四个维度,对IO路径和数据处理的全流程进行紧密配合,实现全栈深度定制优化。其次,华为云存储还融入了多项核心自研算法,将存储写带宽与数据重构带宽提升数倍的同时,通过自适应差量压缩算法将数据压缩率提升3倍,并可大幅降低网络拥塞发生概率,长尾时延降低30%,时延稳定性更优。最后,华为云还将人工智能技术融入分布式存储的全生命周期,智能识别用户业务模型,实现存储平台的自主调优和自我进化,让应用“越用越快”。

可以说,华为云智能数据底座就是引擎、架构、芯片、算法、AI等多项技术融合的成果。目前,华为云是业界为数不多有能力将多项技术进行整合与优化,从而来提升整体服务水平的云服务提供商,其通过全栈技术能力,将所有环节进行协同优化,最终为用户呈现出最佳的云服务。

这一次,华为云通过存储All-Flash战略,明确了以“全闪存、全系列、+智能、全栈创新”为导向的战略布局,并且将让块、文件、对象存储逐步完成全闪存进化。在本次峰会上,华为云发布的全新一代极速IO云硬盘值得一说。回顾云计算市场的发展历史,云服务提供商们需要不断通过技术创新和投入来实现更加出色和高性价比的云服务,进而实现规模效应,以换取自身的成本优势,这背后是一场技术与服务能力的长期价值比拼。

当前正处于从毫秒进入微秒时代的时间拐点,华为云率先拥抱全闪存,是一次引擎、架构、芯片、算法、AI层面的全面革新。这意味着华为云将存储这项基础云服务率先提升了一个等级,也意味着华为云可以为用户提供更加极致性能与体验的云存储服务,成就一个不凡的微秒时代!