加入收藏 | 设为首页 | 会员中心 | 我要投稿 河北网 (https://www.hebeiwang.cn/)- 科技、建站、经验、云计算、5G、大数据,站长网!
当前位置: 首页 > 运营 > 正文

数据中心网络在AI时代的一些思考

发布时间:2018-10-23 09:45:50 所属栏目:运营 来源:中国IDC圈
导读:在已往这五年时刻,数据中心这个规模是新技能演进最频仍最快速的规模,大量的新创新技能,好比说SDN/NFV、云网联动,好比假造互换,包罗Docker这样一些技能,都是在数据中心内部获得发育和获得应用成熟。
7272bb458016d01.jpg_600x600威海站长网(http://www.0631zz.cn)概念大带宽的收集技能也是起首应用在数据中心,好比25G的接入,100G的接入,以及顿时到来的400G的接入,都是起首在数据中内心应用。在数据中心规模,颠末“互联网+”、大数据的大局限成长。 成长到此刻这个阶段,我们在各个行业蕴蓄了大量的行业数据,并且此刻还在天天时时候刻在不绝发生更多的行业数据,基于这样海量的行业数据,我们此刻有机遇从这些数据里发生智能,从而把这些数据真正的代价开释出来,迈入AI的期间。 AI对营业有大量的挑衅,起首是面向计较和存储的,好比呆板实习,呆板翻译的实习,内里计较劲很是庞大,一次实习必要半年以上,这样的迭代速率远远没法满意AI营业的诉求。尚有漫衍式存储,传统的漫衍式存储只能到达2万IOPS,此刻某贸易银行已经能到达35万IOPS的云存储。计较和存储规模的技能也在飞快成长,适才三星韩老师的原料里提到,他们最新的SCM技能的存储体系,时延已经可以或许到达10微秒以下。当存储时延和计较时延可以或许低落到这样的数目级的时辰,各人就发明瓶颈已经不在计较和存储了,瓶颈被转移到收集了。 收集的时延着实很短的,一台互换机一跳的时延也就是几百个纳秒,假如我们思量一个收集三跳,也就是一个微秒阁下的时延,那为什么收集会成为AI计较和存储的一个新的瓶颈?这内里有两点差别,第一,好比这种漫衍式存储,假如把操纵进程打开看,它在一次I/O操纵里会带来六次的收集会见。第二,适才计较的时延着实有必然的误导,我们只看到静态时延,静态转发的时延是这么大。可是收集中,以太网的技能、TCP/IP的技能,有一个很大的题目,像漫衍式存储可能AI计较,漫衍式的计较都有一个特性,会有一此中心节点去分发使命,当全部使命向它发数据的时辰,会形成流量,这个流量有也许会导致流量的拥塞,一旦产生拥塞,时延就从几百个纳秒成十倍百倍的增进,这种动态的时延是我们在AI计较里一个首要的障碍,也是我们当前面对的一个重大挑衅。我们要怎么样去节制这样的动态时延,使它可以或许满意营业技能的要求,这是我们当前面对的一个新的挑衅。 现有的以太网技能并不能满意AI诉求,传统的以太网技能不消讲了,必定是不能满意的。那其后呈现了什么?好比InfiniBand,它的首要诉求是办理低时延的题目,它很好的办理了低时延的题目,可是带来的题目是,第一,它是私有协议,不只仅是一个本钱的题目,可能也不只仅是财富链的题目,它的题目在于在数据中心当前这样一个开放水平下是无法融合的。 好比一个云处事商要想对外提供AI处事,基于AI的云处事给企业,假如从企业角度看,假如他在私有云行使了InfiniBand的技能,要操作公有云来协作计较的时辰也是无法做到的,以是私有是一个很重要的短板。同时它的收集局限很是小,只能支持很小的收集局限,我们此刻看到好比像先辈的云处事商这种互联网企业,他们的局限动辄都是几千台处事器的局限,这个对付InfiniBand的技能来讲是很大的瓶颈。 其它尚有一个技能,在IEEE的CEE的尺度,融合加强以太网首要办理的是无丢包,像漫衍式存储系同一旦呈现丢包,时延的增添是完全无法接管的。它的办理思绪是什么,既然你不要丢包,把你的带宽操作率低落下来,通过大幅度低落带宽操作率来使得你不要丢包。确实到达了不丢包的目标,可是它的题目在于它的带宽操作率太低。我们必要一个什么样的技能来支撑AI的营业诉求,应该是在高吞吐、大带宽的条件下的低时延和无丢包,这是我们此刻所必要的收集,并且必要有用的节制动态时延,而不只仅去存眷静态时延。 华为宣布AI Fabric这个方案,这内里包括了许多技能偏向,我们的方针就是要在高吞吐的环境下实现零丢包和低时延。着实我们是把传统的以太网剖解开,把它原本粗犷无序的方法酿成可控有序。好比适才讲CEE,为什么它的带宽操作率低,一个简朴的道理,它提前对这个流量举办压抑,好比100G的端口带宽设一个水线,好比设到50G,当流量到达50G的时辰,反压前端让它不要再发了,这样就降了,天然不会呈现丢包。可是为了不丢包,必必要把这个水线舍得足够低,进程中尚有耽误效应,这段时刻的耽误之内如故也许会呈现拥塞和丢包。我们此刻提出来的这个技能,通过动态调解水线,通过实验带宽流量监控,去动态调解水线,在到达不丢包的条件之下可以或许到达最大的带宽操作率。虽然尚有一些其他的技能,各人可以到展台再去做一些深入的切磋。

(编辑:河北网)

【声明】本站内容均来自网络,其相关言论仅代表作者个人观点,不代表本站立场。若无意侵犯到您的权利,请及时与联系站长删除相关内容!

    热点阅读