人工智能和工具存储，能擦出什么样的火花？

配景：今天， NVIDIA公布要收购工具存储SwiftStack。

每当看到人工智能(也即AI)，我们凡是会想到呆板人、自动化、图像语音或视频辨认、算法等高峻上的黑科技。而工具存储则给人一种低调、海量的感受。是什么缘故起因，让这两者相遇，并擦出了火花?

什么是工具存储?

工具存储是自包括、自愈合的智能存储装备，具有容量大、速率快、扩展机动的特点。每一个工具除了存放数据自己之外，还存放了独一标识符和数据的元信息，譬喻建设的日期和时刻，属主，巨细，索引，保存周期，QoS等。工具自己使得数据的组织获得了简化，停止了传统存储文件目次树形布局的伟大。工具的存放是扁平化处所式生涯在bucket(桶)中的，变得更简朴。并且工具的元信息，也利便了检索。

拿糊口中常见的例子来比喻，当图书馆购进新的纸质书本必要存放时，必要凭证图书分类法(凭证图书的内容、情势、文体和读者用途等举办分类)，清晰地知道大类、子类和更具体的分类，才气找到吻合的位置上架。文件存储的数据存放就相同图书分门别类地存放，如下图。

类比：文件存储的数据存放方法就像图书分类

当我们逛超市必要存包的时辰，尽量有那么多储物柜，可是各人都认为存取包很简朴。存的时辰，按一下存包按键，啪的一声，一个柜子打开，同时你会获得包括二维码的纸条，你把包放到柜子里，可是不消记着柜子的位置和编号，洒脱的分开。当你取包的时辰，你刷一下二维码，也是啪的一声，放包的柜子自动打开，所存物品唾手可得。工具存储的数据存放方法就和超市存取包很相同，存储工具的独一标识符就相等于谁人二维码。

类比：工具存储的数据存放方法就像超市存包

下图是工具存储的一些特点。

工具存储特点

不外，我们必要留意的是，文件存储和工具存储有着各自合用的场景。下图列出了漫衍式文件存储和漫衍式工具存储的区别：

漫衍式文件存储与漫衍式工具存储的区别

当文件数目级过亿的时辰，文件目次树形布局会对数据的读写造成庞大的挑衅，譬喻在linux中假如用ls查察文件，也许都要守候几异常钟以上。可是，量级没有云云之大时，由于已往的行使风俗，以及相对成熟的生态，行使文件存储照旧不错的选择。

怎样停止错误领略工具存储

当我们谈工具存储时，必要留意接头的是存储接口，照旧内部数据组织情势。

1)现实上，接头工具存储大大都是指存储接口，是否支持RestFul或S3，也即工具接口的情势来会见存储空间。

2)少数环境下，工具存储指存储装备的内部数据组织情势。在数据猛增的配景下，越来越多的存储装备内部回收工具存储的这种内部数据组织情势。譬喻VMware vSAN，着实是是一种基于处事器端存储的共享漫衍式工具存储体系，只不外存储接口首要回收的是SCSI方法;可能具备高靠得住、高机能、高安详和易打点的海潮AS13000，如下图。

海潮AS13000G5的工具存储成果

AI与工具存储

在很多人的印象中，AI必要大量的算力，是计较麋集型的典范应用。而工具存储大多时辰用于海量非布局化数据的存放，备份归档，云存储、企业云盘、文档影像或视频的存储等。从存储特性来看，工具存储的耽误也许较难满意AI的机能需求;从行使风俗来看，大大都AI用户都是回收文件接口。

现实上，有计较，就会有存储，只是或多或少，或快或慢，或过渡或恒久生涯的区别。

在微信公家号海潮存储《2020：下一个十年，存储成长的趋势是什么》上篇也即鉴旧事篇 一文中，曾提到：

AI所需存储，可以分为筹备、实习、推理和归档等阶段，每个阶段的IO特性纷歧样，对付存储的要求也纷歧样。譬喻，在推理阶段，IO的特性是读写殽杂，而且要求存储的延时低，能快速相应。

下图列出了AI各个阶段的IO特性，及其对存储的要求。

AI各个阶段的IO特性及存储需求

综合思量用户行使风俗、性价比、机能和容量，假如可以或许取得一个均衡的话，工具存储可以或许用在AI的多个差异阶段中，如提取、筹备、实习、归档等。

NVIDIA收购SwiftStack用来做什么呢?

起首，我们来看一下做为究竟上的尺度的AWS S3，从骨子里说，它代表的工具存储，是一种在线的海量数据较低本钱的存储方法，得当跨区域读写;因此，固然备份归档是工具存储的行使场景之一，但只是做备份归档，着实是委曲了工具存储。

其次，工具存储的高并发，出格得当前端泛起漫衍式负载的场景。AI场景的行使，包罗AI实习、AI推理，是由许很多多个使命并发举办的，使命与使命之间险些没稀有据的交互，因此很少思量存储凡是要顾及的写同等性。

因此，在我们看来，NVIDIA收购SwiftStack或者有如下几个缘故起因：

1)NVIDIA欲整合AI基本架构

（编辑：河北网）

【声明】本站内容均来自网络，其相关言论仅代表作者个人观点，不代表本站立场。若无意侵犯到您的权利，请及时与联系站长删除相关内容!