华为新一代OceanStor存储Dorado 系列支持通过 AI 芯片对 I/O 处置举行自我优化

原创 我爱代挂网  2020-10-01 14:34:30  阅读 70 次 评论 0 条
摘要:

近日,在日本东京举行的 Interop 展会上,经过行业专家和顶尖学者多轮严格评审,华为新一代 OceanStor 存储 Dorado 系列,凭借 具有

华为新一代OceanStor存储Dorado 系列支持通过 AI 芯片对 I/O 处置举行自我优化第1张-我爱代挂网

克日,在日本东京举行的 Interop 展会上,经由行业专家和顶尖学者多轮严酷评审,华为新一代 OceanStor 存储 Dorado 系列,依附 “具有压倒性的性能和稳固的极低时延,支持通过 AI 芯片对 I/O 处置举行自我优化。”一举夺得 Interop Tokyo 2020 Best of show Award 金奖。这也是继 2017 年上一代 OceanStor 存储 Dorado 系列获奖后,再次获此殊荣。

“这是业界首款将 AI 模块应用在存储里的产物”评审团的一位专家说道,“依附这款内置在存储里的 AI 插件,OceanStor 存储 Dorado 系列能够实时智能地剖析事情负载,不停优化缓存预取算法,提高读取命中率,而且随着时间的推移,系统性能提高 20%。”

华为率先将 AI 能力内置于存储系统,这项创新获得了 Interop 专家评审团的一致认可。这背后是华为研发团队锲而不舍的起劲。接下来,我们就让华为 OceanStor 存储 Dorado 系列产物首席架构师张鹏,来为人人揭秘首款内置 AI 模块的存储背后的故事。

高端存储产物由于追求极致的可靠性,以是看似顽强守旧,实在却蕴含新生气。人工智能手艺的崛起,赋予了高端存储新的生气。

“要让一个存在几十年历史的产物焕发活力,必须思索加入一些创新性的手艺。”张鹏如是说。为此,华为在 OceanStor 存储 Dorado 系列中加入了大量的智能手艺,“华为在 AI 算法方面投入很大。”好比,接纳 AI 模块基于机械学习框架,自动剖析并掌握多个应用模子的 IO 纪律,让读缓存命中率连续提升。

“OceanStor 存储 Dorado 系列这种全互联、全共享的架构,异常适合接纳机械学习这些人工智能手艺,对 IO 举行全局的学习和剖析,实现存储操作加倍智能化,从而提升系统的性能和效率。”张鹏弥补道。

内置智能 AI 模块,学习 IO 纪律,优化预取算法,提升系统性能

在周末,T-Mobile正式退休了Sprint品牌。它用洋红色将所有Sprint商店重新粉刷,并从这些商店中删除了 Sprint。现在,他们能够为Sprint和T- T-Mobile

我们都知道读 Cache 是存储系统常用的加速手段,就是把数据预先从硬盘中取出来,放在一个比硬盘更快的地方,通常用的介质是 RAM。针对读数据的义务,CPU 会先去读 cache 内里查找,找到了就反馈给前端接口卡,由前端接口卡传送给用户,如在 cache 中未找到才会去硬盘内里找。很明显,最理想的情形就是所有的读数据请求都能在读 cache 内里找到数据,这样是性能最高的。然则数据是杂乱的,义务是随机的,怎么知道应该提前取哪些数据放在读 cache 内里呢?

为了解决这个难题,华为 OceanStor 存储 Dorado 系列首创引入人工智能模块作为存储系统插件,提升展望准确率。

“他们竟然把AI用在了全闪存里!?”日本专家AI上华为OceanStor存储

图一:AI 模块 + 智能算法

那么内置的 AI 模块是怎么辅助提升展望准确率的呢?我们知道,存储系统收到的数据是一份一份的,每一份我们叫做一个 I/O。差别的营业,发送过来的 I/O 是千差万别的。然则 I/O 不仅存在时空关联,而且也存在语义关联。时间关联就像是 8 点后面是 9 点,空间关联就像是中国的北面是俄罗斯和蒙古。语义关联就像我们说 “北极熊是世界上…”,后面大概率是想说 “体型最大的熊”。I/O 也是这样,只不过我们需要把这些关联挖掘出来。知道了这些关联,自然就能提高预取的准确率了。

OceanStor 存储 Dorado 系列中的 AI 模块集成了自调优的深度学习算法,可以对上层营业的全量 I/O 数据从时空关联和语义关联上举行快速剖析和深度挖掘。当 I/O 过来后,它会马上判断出即将接见的数据,并告诉 CPU 赶忙取到读 cache 中。同时,它还在后台不停对已有数据举行二次学习,进一步提升准确率。最后是通过对预取命中率、浪费率、时延等要害性能指标举行评估,然后自主调整。

经由华为性能实测,OceanStor 存储 Dorado 系列在同样带宽的前端卡(16G FC),同样的测试模子(随机读,64K 以内 I/O 数据块巨细),读 cache 命中率从 19% 提升到 69%。

总结一下:

OceanStor 存储 Dorado 系列中内置的 AI 模块,就像汽车的智能变速箱,它通过连续的自我学习,逐步提升,让存储系统加速,越用越好用。

本文地址:https://www.bjertong999.com/2161.html
版权声明:本文为原创文章,版权归 我爱代挂网 所有,欢迎分享本文,转载请保留出处!

评论已关闭!