登录
首页 > 奥迪汽车 > NVLink,英伟达的另一张王牌

NVLink,英伟达的另一张王牌

发布时间:2023-12-19 11:27:21 发布用户: 15210273549

美国商务部的口风越来越紧,逼得黄式刀法重出江湖:多方证实,英伟达即将推出三款特供版GPU,由于出口管制,性能最强的H20,相较H100算力也大幅缩水80%。

 

算力被限制死,英伟达也只能在其他地方做文章。H20的最大亮点落在带宽:

 

带宽达到与H100持平的900G/s,为英伟达所有产品中最高。较A100的600G/s,和另外两款特供芯片A800和H800的400G/s大幅提高。

 

阉割算力,提升带宽。看似割韭菜,实则含金量不低。


H20踩着红线免受制裁

 

简单来说,带宽的大小决定了单位时间向GPU传输的数据总量。考虑到人工智能对数据吞吐能力病态的要求,如今衡量GPU的质量,带宽已经成为算力之外最重要的指标。

 

另一方面,云服务公司和大模型厂商不是只买几颗芯片,而是一次性采购几百上千张组成集群,芯片之间的数据传输效率也成了迫在眉睫的问题。

 

GPU和GPU之间的数据传输问题,让英伟达在芯片算力、CUDA生态之外的另一张王牌浮出了水面:NVLink。

 

数据传输,算力的紧箍咒


要理解NVLink的重要性,首先要了解数据中心的工作原理。

 

我们平时玩游戏,一般只需要一块CPU加一块GPU。但训练大模型,需要的是成百上千个GPU组成的“集群”。

 

Inflection曾宣称他们正在构建的AI集群,包含多达22000张 NVIDIA H100。按照马斯克的说法,GPT-5的训练可能需要3万到5万张H100,虽然被Altman否认,但也可以窥见大模型对GPU的消耗。

 

特斯拉自家的超算Dojo ExaPod,就是由多个Cabinet机柜组成,每个机柜里有多个训练单元,每个训练单元都封装了25个D1芯片。一整台ExaPod包含3000个D1芯片。

 

但在这种计算集群中,会遇到一个严峻的问题:芯片彼此独立,如何解决芯片之间的数据传输问题?

奥迪汽车更多>>

“非物质文化遗产丛书”推出90余种,传承人现场展示拉纤号 四川渠县创新文旅产业打造“忘忧”IP,要做成渝经济圈明珠 莫迪去了G7,却不参加上合会议,印度已渐行渐远?有新成员要加入 沃尔沃汽车525车主节狂欢:线下门店AED设备全面到位 首搭第五代DM技术 比亚迪秦L DM-i上市 售价9.98万-13.98万元 5.4米+双电机,魏派高山行政加长版实拍,第三排座椅也带腿托 保时捷4S店造反?销量下跌,库存爆炸,豪车也扛不住! 又又又爆单了!奇瑞新能源团购斩获订单706台!六站联动,乐购一夏! Jeep Avenger 4xe版谍照 将于2024下半年发布 吉利银河混动首年销量超12万 购车至高可降25000元 小米SU7开启OTA更新 智能座舱升级/首发端到端代客泊车功能 10万级混动SUV的新选择,荣威D5X DHM凭什么? 年轻就要勇敢一次!第二代UNI-V智电iDD挑战东方阿尔卑斯魔鬼山路 资讯|第二代UNI-V智电iDD挑战东方阿尔卑斯魔鬼山路游刃有余 北京汽车BJ30售9.99万起,混动四驱也仅为13.69万 主、被动安全皆领先,星途揽月成家用SUV安全“最优解” 东风奕派008有望在6月正式上市 吉利银河E5最低电耗11.9kWh/100km 不堆电池拼整体能耗 奥迪为 900 万挚友助“利”梦想 再添置换补贴限时至高42,000 元 可能不做四驱,问界M8将比问界M9便宜5万? 预计下半年上市,吉利银河E5最新信息曝光,提供两种续航可选 外观内饰脱胎换骨 雪佛兰探界者EV能从国外火到国内? 增配价更低!售11.57万元起,吉利新博越L正式上市 1-4月中型SUV销量榜单 仅一款过十万 德系表现很抢眼 20多万的增程式家用SUV,星纪元ET和理想L6谁更值得买? 领克07 EM-P限时领享价16.38万起,20万内最强电混轿车价值标杆! 普利策奖得主迪亚斯携《信任》来华,与毕飞宇共探虚构的力量 从设计源头减少“公摊”,增加的不只是得房率 讲价格更讲价值,红旗以品质技术造“人民的好车” 高位促销之下,4月乘用车仍遭“滑铁卢”
Copyright 2015-2024 二手车测评网 版权所有  京ICP备18049689号-25 客服QQ:318697669