首页 资讯 正文

与机器人“同事”一起工作,你准备好了吗?

体育正文 247 0

与机器人“同事”一起工作,你准备好了吗?

与机器人“同事”一起工作,你准备好了吗?

2025年1月15日,中国AI大(dà)模型(móxíng)DeepSeek R1刚一问世,便震动全球。 针对DeepSeek,全世界展开了一场(yīchǎng)龙争虎斗。 可仅仅2周之后(zhīhòu),2月1日(大年初四),华为云就联合硅基流动基于昇腾云(téngyún)推出DeepSeek R1/V3,引爆全网。 从(cóng)模型到算力,从引擎到框架,全面实现国产化。 这其中,DeepSeek和华为自(zì)不用说。硅基流动作为一家AI Infra(AI基础设施)企业(qǐyè),则是清华博士袁进辉2023年刚创立的创业公司(gōngsī)。 创业(chuàngyè)公司往往嗅觉极度灵敏。 其实,早在DeepSeek V3发布前一个月,DeepSeek创始人梁文锋就找到袁进辉(yuánjìnhuī),问他要(yào)不要部署? 袁进辉算了(suànle)一笔账:动用80台英伟达H800服务器,单月花费五六百万,风险(fēngxiǎn)很大。 但眼见着DeepSeek越来越(yuèláiyuè)火爆,全世界的AI团队都争分夺秒(zhēngfēnduómiǎo),连英伟达也亲自下场。 时间不(bù)等人,硅基流动火速找到华为云。双方(shuāngfāng)一拍即合,决心大干一场,希望能用国产算力率先搞定部署难题。 华为云的方案(fāngàn),正是昇腾云。 于是,双方经过彻夜不息的努力,终于在2月推出基于昇腾云与硅基流动(liúdòng)推理加速引擎的DeepSeek,成为(chéngwéi)国内第一个成功部署DeepSeek服务(fúwù)的企业。 仅2月(yuè),硅基流动网站访问量暴增40倍,冲上中国AI网站排行榜第6、全球AI网站增长(zēngzhǎng)榜第2。 狂暴的流量,让人(rén)又惊又喜。 据华为云技术负责人王磊回忆,硅基流动(liúdòng)DeepSeek刚上线,第一波流量超乎想象。他不得不四处腾挪,紧急(jǐnjí)调拨2000多张昇腾910B卡驰援,才勉强扛住(zhù)。 但第一波“洪峰”之后,更大的(de)流量爆发了。 这一次,不得不每次1000卡地往上加,不计上限地调配算力(suànlì),才勉强扛住(zhù)。 但这一波之后(zhīhòu)呢?未来的流量,还会爆发到怎样的程度? 于是,华为云找到袁进辉,亮出当时(dāngshí)还秘不示人的(de)“大杀器”——CloudMatrix 384超节点。 对于超节点,袁进辉早有(yǒu)耳闻。 2024年3月,英伟达首发NVL72超节点(jiédiǎn),一度震惊世界。 传统AI服务器里(lǐ),一张计算卡仅(kǎjǐn)能容纳8块GPU;但(dàn)NVL72超节点,能将72块GPU组成一台超级AI服务器,令AI算力和通讯速度实现飙升。 所以,超节点(jiédiǎn)是一种将GPU高度集成的AI服务器“黑科技”。 谁也(yě)没想到,华为云这么快(kuài)就搞出了CloudMatrix 384超节点。 而且,华为云超节点的(de)昇腾卡(kǎ)互联数量飙升到384张,远超英伟达NVL72的72卡。 这是中国AI的算力之巅,更是前所未有的应用挑战(tiǎozhàn)。 当时,袁进辉坦承对CloudMatrix 384怀有疑虑(yílǜ): 第一(dìyī),DeepSeek所需的大规模专家并行,要求多卡之间实现低延迟(yánchí)、高协同,并使用All-to-All通信。 但即便是(shì)英伟达,对All-to-All的支持也相当乏力。 CloudMatrix 384行不行(xíngbùxíng)?没有人知道。 第二,英伟达(wěidá)NVL72超节点,采用铜连接;CloudMatrix 384却采用光模块(mókuài)。区别在哪呢? 光模块通信具备更高带宽和更低时延(shíyán),适合大容量、长距离传输;此外光网络架构简化,空间和功耗(gōnghào)节省(jiéshěng)显著,且扩展性更强。但光模块最大的问题就在于故障率高。 这个超高难度(gāonándù)的连接方式,到底行不行?没有人知道。 尽管充满疑虑,但袁进辉选择(xuǎnzé)“信华为”: “华为不仅是打过硬仗的(de)团队,更创造了很多很多的奇迹。” 实际上,袁进辉的疑虑,也正是腾建军所(suǒ)担心的。 2023年2月,一场骤然爆发的电源(diànyuán)浪涌,席卷新加坡(xīnjiāpō)数据中心,多家云厂商和数据中心客户受影响。 腾建军(jiànjūn),正是这场危机的亲历者。 当时,新加坡华为云(yún)和微软云恰好在(zài)同一数据中心。唯一(wéiyī)不同的是,电源浪涌爆发后,华为云的AI for DC(Data Center),迅速(xùnsù)“感知”到电源浪涌引发的高温,自动触发应急预警。 作为资深专家(zhuānjiā),腾建军和团队迅速判断出,这将是一场全局危机。 这也是一场争分夺秒的(de)战斗。 1分钟发现故障(gùzhàng),3分钟建立作战室进行统一指挥(tǒngyīzhǐhuī),1小时内启动干冰应急计划…… 腾建军率领团队头戴防毒面罩、手挑干冰,冲进现场给服务器物理(wùlǐ)降温,生生扛住这波突袭,确保了华为云(yún)稳定运行。 江湖传言,这一天,新加坡的干冰被华为云(yún)直接搬空。 微软云(yún)在内部温度(wēndù)骤升、短暂抵抗之后,关闭了服务器,中断了云服务。 微软云客户甚至是在Twitter上(shàng),才得知自家(zìjiā)业务猛然宕机,被打了个措手不及。 一边迅速趴窝(pāwō),一边稳如泰山。 仅此一招(yīzhāo),足见华为云的功力。 但智算超节点时代(shídài),对数据中心的要求更加苛刻。 在腾建军眼中,CloudMatrix 384超(chāo)节点要在物理上真正落地,数据中心要解决的是一连串实打实的难题(nántí)。 因为数据中心,是“智算超节点(jiédiǎn)产品”不可分割的一部分。 传统数据中心,供电只做到8-10千瓦/机柜;但为了驱动CloudMatrix 384,仅(jǐn)供电就要(jiùyào)飙升到50千瓦甚至更高(gènggāo),怎么办? 那就(jiù)突破标准,超前技术准备、超前建设。 散热上,一套CloudMatrix 384横跨16个机柜,热量密度飙升(biāoshēng),必须(bìxū)构建一套精密的液冷散热系统。 这其中,仅铲齿散热器的缝隙,就堪比发丝般(bān)精细。一旦(yídàn)散热液洁净度出现(chūxiàn)些许问题,或是不可避免滋生细菌微生物,就很可能将铲齿散热器堵死,不可避免导致大规模宕机。 一方面,用AI for DC提前预警;另一方面,通过物理(wùlǐ)+化学(huàxué)的新方法长效杀菌,实现数学、物理到生物、化学的跨界研究,引领一场液冷(yèlěng)革命。 而(ér)这些技术,早在几年前就在华为云(yún)得到规模应用,展现出技术超前投入的前瞻价值。 光模块,差点成了腾建军“过不去的坎(kǎn)”。 实际上(shíjìshàng),华为在光通信领域早已世界领先。 2020年,华为(huáwèi)全球首发800G超高速光模块,独步全球;2025年,华为再发1.6T硅光模块,在800G基础(jīchǔ)上再翻一倍。 至此,业界已无人得见华为光通信的“车尾灯(chēwěidēng)”。 强大的(de)技术积淀,让华为云用光模块构建超节点,而非采用(cǎiyòng)铜连接,成为一种必然。 可真枪实弹干起来才发现(fāxiàn),困难比预想的大得多。 实测中(zhōng),腾建军发现:光(guāng)链路的闪断太频繁了,结果就是——完全不能用! “咯噔”一下子。问题严重(yánzhòng)了! 当时,CloudMatrix 384赫然被(bèi)(bèi)列入华为重点密级项目,是必须强渡的“大渡河”。加上单卡性能不如人,被逼(bī)得只能闯光模块这“华山一条路”。真被卡死,满盘皆输。 但(dàn)那段时间,腾建军对团队说的最多的话却是: 不要谈困难,想尽办法(xiǎngjǐnbànfǎ)去突破。 于是,一边内部想办法,一边外界请高人(gāorén),同时,只能用最笨(zuìbèn)的办法把难题列出来,一条条去攻克。 终于(zhōngyú),腾建军团队发现:八成以上问题,出在(zài)光(guāng)模块几乎肉眼不可见的脏污上,严重影响了通讯质量;而脏污的产生,就在数据中心现场超节点内网互连的安装环节。 于是,团队打造出针对光模块故障的定位和(hé)修复系统,通过数字化平台上的专家经验库和现场光模块的故障现象(xiànxiàng)进行对接,实现了问题快速(kuàisù)定位、故障迅速处置。 这(zhè)一次,CloudMatrix 384再上线,速率(sùlǜ)、稳定性大幅提高。 作为全球(quánqiú)首次大规模(dàguīmó)动用光模块部署超节点的探索,华为云创造了“奇迹”。 这一切,都成为硅基流动基于CloudMatrix 384再次爆发(bàofā)的(de)坚实根基。 2月底,当强大的CloudMatrix 384呈现(chéngxiàn)在硅基流动(liúdòng)团队面前时,所有人面对的,却是一场新的长征。 3月初,硅基流动DeepSeek服务在(zài)超(chāo)节点上刚跑通,吞吐量只有320 Tokens/秒,低到令人难以置信。 一台算力怪兽,表现(biǎoxiàn)如此拉胯,问题出在哪?没有人知道。 实际上,普通人很难想象,大模型内星辰(xīngchén)般的宏大: 它的参数,高达(dá)数千亿(shùqiānyì)级;它的神经网络(shénjīngwǎngluò)层级,成百上千;每个(měigè)算子(神经网络中具备特定功能的算法节点)背后,连接着不计其数的分布式系统;它的结果,则由成百上千张GPU协同计算输出,充满概率偶然。 要在这其中(qízhōng)找出问题,仿佛是在一座亚马逊雨林中通缉一只细菌。 这几乎是一个不可能完成(wánchéng)的任务。 很快(hěnkuài),王磊发动“超能力”,开始全公司“摇人”。 从底层做(zuò)芯片的(de)、做存储的、做计算的,到上层做算子的、做推理的、做平台的……王磊竭尽所能,几乎把技术栈上的所有团队(tuánduì)拉到现场,跟硅基流动团队协同办公、攻坚克难。 协议有问题,马上改协议;算子有问题,马上改算子……围绕硅基流动DeepSeek服务上的超节点大计(dàjì),华为上百人的团队(tuánduì),昼夜攻关不息(bùxī)。 而(ér)对华为云团队来说(láishuō),冗长的测试,更是一个永不停歇的“西西弗神话”。 通信(tōngxìn)有瓶颈,优化通信;但接着,计算问题又冒出来了;于是(yúshì),优化计算后,GPU、NPU太快,CPU不匹配…… 当整个技术栈(zhàn)全部优化一遍后,王磊猛然(měngrán)发现,问题又从最初的源头,再次冒了出来。 总之,按下葫芦浮起(fúqǐ)瓢。 但就是在这种重复(chóngfù)、重复、再重复的优化过程中,CloudMatrix 384,终于被托举(bèituōjǔ)到一个不可思议的新高度。 4月10日,华为云生态大会,硅基流动(liúdòng)创始人袁进辉郑重宣布: 基于(jīyú)CloudMatrix 384的DeepSeek-R1在保证(bǎozhèng)单用户 20 TPS水平(shuǐpíng)前提下,单卡 Decode吞吐量突破 1920 Tokens/秒。 相较英伟达H100,性能(xìngnéng)追平;相较3月初的CloudMatrix 384,性能提升6倍;相较昇腾(téng)910B单卡,性能飙升(biāoshēng)10倍。 这背后,CloudMatrix 384还实现了性能倍增(训推提升(tíshēng)20%)、以存强算(吞吐量提升100%)、MoE亲和(千亿MoE提升3X)、长稳(zhǎngwěn)可靠(长稳运行(yùnxíng)40天不中断)、朝推夜训(算力(suànlì)利用率提升30%)、即开即用六大特性。 所谓MoE,即DeepSeek中的“混合专家(zhuānjiā)模型”。DeepSeek之所以功能超强,在(zài)于其会内置多个“专家”处理问题。而在硬件层面,通常1枚芯片对应1个“专家”,于是芯片越(yuè)多,效率越高(yuègāo)、性能越强。 而超节点集成了384张昇腾卡,极大(jídà)优化了MoE能力。 这不仅令DeepSeek性能(xìngnéng)大爆发,更展现出华为云在(zài)AI技术上的前瞻布局。 今天,在华为(huáwèi)云三大云核心枢纽(贵州贵安、内蒙古乌兰察布、安徽芜湖),CloudMatrix 384实现全面布局(bùjú),成为国内唯一正式商用(shāngyòng)的大规模超节点。 强大(qiángdà)的算力网,令万卡级服务,分分钟即可开启。 这不仅是华为云的自我超越,也不仅是部分指标上对英(yīng)伟达的超越,更大的意义,在于中国(zhōngguó)AI正呈现出体系化的突破式创新。 用(yòng)袁(yuán)进辉的话说:美国试图像“三体人”一样,用芯片锁死中国科技。 但6年抗争过去,向死而生的华为(huáwèi),却越挫越勇。 当历经(lìjīng)了鸿蒙蛰伏、海思(hǎisī)攻坚、昇腾崛起……凭借华为云CloudMatrix 384超节点(jiédiǎn),一道坚不可摧的国产算力防线正在构建。 AI长跑没有终点(zhōngdiǎn),突破,也不会有终点。但中国AI,一定会迎来自己(zìjǐ)的“奇点”时刻。(应受访者要求,文中王磊、腾建军为化名) (本文来源:日照新闻网。本网转发此文章,旨在为读者提供(tígōng)更多信息资讯,所涉内容不构成投资、消费建议。对(duì)文章事实有(yǒu)疑问,请与有关方核实或与本网联系。文章观点非本网观点,仅供读者参考。)
与机器人“同事”一起工作,你准备好了吗?

欢迎 发表评论:

评论列表

暂时没有评论

暂无评论,快抢沙发吧~