加入收藏 | 设为首页 | 会员中心 | 我要投稿 河北网 (https://www.hebeiwang.cn/)- 科技、建站、经验、云计算、5G、大数据,站长网!
当前位置: 首页 > 云计算 > 正文

容器持久化存储,距离你有多远?

发布时间:2019-12-23 03:07:45 所属栏目:云计算 来源:DOIT
导读:都知道数字化转型的重要性,但怎么转?依赖哪些数字科技?就不简朴了。数字科技的特点是观念频出,目眩凌乱的同时,也让人头晕眼花,追赶不上成长的步骤。 这里要评论的是容器耐久化存储,信托对许多人来说,这是一个新观念。 假如从界说可能观念来相识它
副问题[/!--empirenews.page--]

都知道数字化转型的重要性,但怎么转?依赖哪些数字科技?就不简朴了。数字科技的特点是观念频出,目眩凌乱的同时,也让人头晕眼花,追赶不上成长的步骤。

这里要评论的是容器耐久化存储,信托对许多人来说,这是一个新观念。

假如从界说可能观念来相识它,涉及技能许多,用户的基本差异、认知差异,要快速把握容器耐久化存储的代价,着实并不轻易,叫存储,可是意义逾越存储。

大概把界说放在一边,相识它可以或许办理哪些题目和痛点,不失为一个捷径。

办理的题目要害吗?

容器耐久化存储要办理哪些痛点?

12月10日, 焱融科技以“Time To Change”为主题在京宣布了漫衍式文件存储产物YRCloudFile,并与Mellanox、科大讯飞、Rancher等200+客户和相助搭档,配合研讨IT厘革海潮下的应对之策。

必要留意,所谓“Time To Change”,“当令改变”不止娓存储,存储之上,更重要的是TensorFlow、Spark、MySQL、Jenkins、ElasticSearch和WordPress为代表的应用,也就是云原生的应用也在产生改变。

容器耐久化存储,间隔你有多远?

现在,行业巨头以及互联网企业就是依赖这些呼风唤雨,改变天下。

私有云也好,公有云也好,传统企业应用的云原生化改革迫不及待,不然会被越拉越远。不只是互联网企业的攻击,更大的危急来自转型快的偕行,快鱼吃慢鱼,赢者通吃,这才是硬原理!

容器耐久化存储脚色的份量

意识到这样的变革,就很轻易相识容器耐久化存储的意义和代价。

起首说容器化。K8S已经成为云原生的究竟尺度,被广泛接管和行使,也是云原生应用主要行使的编排器材。同样,容器化也带来基本架构的一系列改变。个中,容器耐久化存储首当其冲。

容器耐久化存储,间隔你有多远?

都知道容器的特点是召之即来,挥之即去。这是由于无状态应用的缘故。对有状态的应用,如MySQL、PostgreSQL、MangoDB、RabbitMQ、ElasticSearch来说,也回收留器来运行。当容器“死了”,必要快速重建,这个时辰题目来了,数据也可以或许快速重建吗?

这时就必要耐久化存储了。

CSI、FlexVolume都是容器耐久化存储的类型接口,可是仅支持接口的存储就是容器耐久化存储吗?谜底是否认的。今朝市场上支持CSI存储许多,有传统的、漫衍式的、开源的、商用的,但在现实应用中,,产物示意不同很大。是选用一款能在容器场景下根基可以行使的存储,照旧一款完全切合容器化场景容器耐久化存储,是每个IT决定者面对的题目。

容器耐久化存储,间隔你有多远?

海量小文件处理赏罚和机能

对付容器耐久化存储来说,容器存储热门说明、可视化揭示、K8S资源可视化打点、QoS机能管控、存储卷弹性伸缩等,这些都是权衡容器耐久化存储成果的指标。

另一方面,海量小文件处理赏罚、海量小文件会见热门,有状态Pod跨节点的秒级重建,以及跨数据中心的双活办理方案等,也是容器耐久化存储重要的机能及靠得住性指标。

海量小文件是许多应用场景常常面对的题目,以呆板进修AI为例,数据实习中必要依靠大量的小文件,局限会到达几十亿;另外,高机能计较也将涉及到海量文件的处理赏罚。

海量小文件会导致元数据打点瓶颈,最终拖累数据存储的机能。为了应对海量小文件处理赏罚,YRCloudFile回收元数据集群,借助横向扩展的方法来消除元数据打点的瓶颈。

测试功效表现,从10亿~70亿小文件,YRCloudFile始终可以或许保持元数据处理赏罚手段的一连不变。

容器耐久化存储,间隔你有多远?

热门目次是另一个造成机能瓶颈的来历,也就是多台处事器齐集会见某个单一目次下的文件,形成热门目次,假如体系对付热门目次并行处理赏罚手段不敷,就会导致体系瓦解,可能机能低下。

针对热门目次,YRCloudFile提供假造目次的技能,对付文件名(filename)举办Hash运算后安排在假造目次中,假造目次数据漫衍在差异的元数据节点,对上层应用透明,从而加强热门目次的并行处理赏罚手段。

容器耐久化存储,间隔你有多远?

与此同时,借助4k小文件的内联,YRCloudFile进一步晋升了小文件会见处理赏罚的机能。

容器耐久化存储,间隔你有多远?

海量小文件处理赏罚不限于容器耐久化存储,对AI等非布局化数据局限庞大的新型应用而言至关重要,这也是YRCloudFile对准的首要场景。

块数据的话题

在存储的传统认知中,有NAS和SAN之分。个中,NAS首要应用于文件存储,漫衍式文件存储因此被解读为漫衍式NAS,既然云云,它可以或许支持MySQL容器Pod跨节点块数据重建吗?

对此,焱融科技CTO王鹏飞指出:“凡是以为数据库要行使块存储。但我们的实测,漫衍式文件体系依然可以满意数据库需求,焱融科技有许多奇异的优化技能和最佳实践。”

“漫衍式文件体系支持数据库应用,本质上也很轻易领略。在容器内(MySQL) 都支持挂载一个数据目次做为MySQL的存储空间,因此从漫衍式文件体系内申请一个目次即可满意应用。”王鹏飞说。

今朝YRCloudFile可以或许支持有状态Pod跨节点的秒级数据重建,云云,就办理了当容器节点呈现妨碍,容器快速重建、数据快速规复的题目。

容器耐久化存储,间隔你有多远?

同样的,跨数据中心容器双活的题目也轻易实现。

(编辑:河北网)

【声明】本站内容均来自网络,其相关言论仅代表作者个人观点,不代表本站立场。若无意侵犯到您的权利,请及时与联系站长删除相关内容!

热点阅读