<cite id="ffb66"></cite><cite id="ffb66"><track id="ffb66"></track></cite>
      <legend id="ffb66"><li id="ffb66"></li></legend>
      色婷婷久,激情色播,久久久无码专区,亚洲中文字幕av,国产成人A片,av无码免费,精品久久国产,99视频精品3
      網(wǎng)易首頁 > 網(wǎng)易號 > 正文 申請入駐

      從炫技到務(wù)實,超節(jié)點的祛魅時刻

      0
      分享至



      DeepSeek、通義千問、Kimi-K2等深度思考的大模型,大家應(yīng)該都用過。用戶對AI越來越上頭,企業(yè)IT對算力保障的焦慮也在加劇。過去跑個小模型,8張GPU的服務(wù)器還能應(yīng)付,可帶不動DeepSeek這種上百個專家、毫秒級響應(yīng)的MoE架構(gòu)推理模型。

      超節(jié)點,就是在這一背景下,火起來的。

      傳統(tǒng)單臺8卡服務(wù)器,無法滿足當(dāng)下大模型訓(xùn)推的算力需求。由英偉達(dá)率先提出的超節(jié)點技術(shù),通過內(nèi)部高速互聯(lián),把數(shù)十甚至上百個AI計算芯片,集中整合到一個架構(gòu)內(nèi),打造出基于Scale-up的新型架構(gòu),以此實現(xiàn)算力的量級躍升。核心優(yōu)勢可以用一個字概括:省。



      省錢,超節(jié)點通過內(nèi)部高速互聯(lián),每張卡都能滿負(fù)荷運行,避免傳統(tǒng)多機(jī)柜間的算力閑置空轉(zhuǎn),GPU卡和電費就不會浪費了;

      省地,以前跑大模型得把多個機(jī)柜拼起來,占滿半個機(jī)房,現(xiàn)在一臺超節(jié)點就能扛起AI訓(xùn)推任務(wù),物理空間占用更小了;

      省事,超節(jié)點把硬件、互聯(lián)、管理系統(tǒng)全集成好了,企業(yè)接入就能跑大模型,AI部署更快,而傳統(tǒng)多臺服務(wù)器要單獨調(diào)試、搭建網(wǎng)絡(luò)、解決散熱,一套流程下來,沒半年搞不定……

      有不少CIO或IT從業(yè)者十分困惑,超節(jié)點能幫我們用AI更省,可怎么還是買不著、用不起呢?有一種“出發(fā)點很好,但就是出發(fā)不了”的無力感。



      的確,目前真正用得上、用得起超節(jié)點的行業(yè)和企業(yè),并不是很多。

      原因比較復(fù)雜,比如高端N卡斷供,國產(chǎn)GPU規(guī)模出貨量受限等。其中,有一個因素容易被忽視,那就是超節(jié)點讓AI更省的核心邏輯,似乎正在跑偏。

      在超節(jié)點的新聞里,常能看到千卡、單柜X百卡等參數(shù)互相碾壓,媒體追捧超節(jié)點的新紀(jì)錄,圍觀群眾也默認(rèn),規(guī)模越大卡越多的超節(jié)點就越先進(jìn)。

      但對大多數(shù)企業(yè)來說,真的需要這么大的算力巨獸嗎?斥巨資買回數(shù)百卡的超節(jié)點,能靠AI賺回本嗎?這些問題,已經(jīng)到了必須回答的時刻。



      不可否認(rèn),數(shù)百卡,甚至上千卡的超節(jié)點,是國產(chǎn)智算技術(shù)進(jìn)步的證明。但大家有沒有想過,我們給手機(jī)充電,會關(guān)心發(fā)電廠的規(guī)模有多大,是核電廠還是水電廠嗎?只會在乎插上有沒有電,電壓是否適配,電流是否穩(wěn)定,會不會把手機(jī)燒壞,這些實用層面的問題。

      同樣的道理,企業(yè)部署超節(jié)點,除了集成多少卡,也要考慮到實際應(yīng)用中的隱性成本:

      一是故障率升高帶來的中斷損失。

      超節(jié)點規(guī)模越大,內(nèi)部光模塊、交換機(jī)、電源節(jié)點就越多,比如某300多卡的超節(jié)點架構(gòu),就涉及近6900個光模塊和100臺左右交換機(jī)。而在高密度部署場景中,任一環(huán)節(jié)故障,都可能導(dǎo)致整個訓(xùn)練任務(wù)中斷。對AI大模型訓(xùn)練來說,故障意味著要從checkpoint檢查點重新加載模型、重啟訓(xùn)練,浪費數(shù)天時間和高額電費。

      對企業(yè)來說,不中斷、不重訓(xùn),比多幾張卡更加重要。



      二是GPU閑置導(dǎo)致的每Token成本過高。

      業(yè)內(nèi)已有共識,超節(jié)點規(guī)模存在“甜點”,超過甜點后,繼續(xù)增加超節(jié)點規(guī)模,性能提升有限但成本顯著上升。有模擬數(shù)據(jù)顯示,十萬億參數(shù)模型,甜點大概在32-64卡。也就是說,盲目追求上百張卡的超大規(guī)模,算力利用率也許并不高,GPU大部分時間是在閑置。比如說,DeepSeek官方論文給的參考方案,Decode階段需用144張H800,如果超節(jié)點使用的國產(chǎn)卡算力是H800的1/3,那么在PD分離場景下,48卡甚至32卡才是更優(yōu)選擇。

      三是運維復(fù)雜度提升導(dǎo)致的總體TCO成本增加。

      高集成度的超節(jié)點產(chǎn)品,對運維團(tuán)隊的專業(yè)能力要求極高,一旦規(guī)模增大,內(nèi)部故障點也會隨之增多,小團(tuán)隊很難靠自己處理。比如英偉達(dá)早期就曾嘗試過二層架構(gòu)超節(jié)點,將交換機(jī)集成到單機(jī)內(nèi)以擴(kuò)大規(guī)模,但企業(yè)客戶更傾向于選擇單層架構(gòu),核心就是為了降低故障點、減少運維難度。英偉達(dá)256卡超節(jié)點也由于TCO總擁有成本太高,而互聯(lián)網(wǎng)企業(yè)客戶對TCO很重視,未能成功商業(yè)化。

      所以,超節(jié)點并不是規(guī)模越大卡越多就越好。企業(yè)需要的是能解決算力問題,且ROI投資回報率最優(yōu)的IT基礎(chǔ)設(shè)施。超節(jié)點技術(shù)的發(fā)展,要回歸讓企業(yè)用AI更省的出發(fā)點,與企業(yè)AI業(yè)務(wù)相適配的方案才是最優(yōu)解。



      既然堆卡不是出路,那么如何才能讓超節(jié)點真正成為企業(yè)的省錢利器?產(chǎn)業(yè)界已經(jīng)給出了答案:回歸理性,追求規(guī)模與需求的適配,并通過開放生態(tài)降低綜合成本。

      一方面,越來越多的廠商將目光投向32卡、64卡這樣的更合身的規(guī)模。

      如前所說,超過性能-成本甜點區(qū)之后,超節(jié)點的邊際效益就會遞減。因此,大量國產(chǎn)廠商聚焦在32-64卡的實用化設(shè)計,推出貼合企業(yè)需求的產(chǎn)品。比如新華三UniPoD S80000,實現(xiàn)了單機(jī)柜32/64卡高密部署等,讓多數(shù)企業(yè)能夠負(fù)擔(dān)得起大模型訓(xùn)推開銷。而且,新華三UniPoD S80000采用單層全互聯(lián)架構(gòu),大幅降低了通信延遲和故障點,在MoE等主流模型場景下,更有助于保障業(yè)務(wù)連續(xù)性。剛好的規(guī)模與更高的可靠性,成為AI算力降本增效的關(guān)鍵。



      (新華三超節(jié)點H3C UniPoD S80000)

      另一方面,開放的硬件生態(tài)正在成為降低成本的新引擎。

      隨著國產(chǎn)芯片生態(tài)成熟,開放式架構(gòu)支持多品牌國產(chǎn)加速卡,打破海外高端卡壟斷,為用戶提供了更多選擇,從而降低企業(yè)的算力成本。這類開放式超節(jié)點,也成為算力普惠的關(guān)鍵。比如新華三超節(jié)點支持多品牌國產(chǎn)加速卡,兼容CUDA等主流軟件生態(tài),降低企業(yè)的供應(yīng)鏈成本。

      上述實踐,有望助力超節(jié)點的普及,從頭部企業(yè)的專屬品,成為千行百業(yè)的普惠基礎(chǔ)設(shè)施。



      需要說明的是,數(shù)百卡、千卡超節(jié)點的研發(fā),有其戰(zhàn)略意義。這一技術(shù)路線,推動了光互聯(lián)、液冷、高密度布線等底層技術(shù)的極限突破,是中國算力產(chǎn)業(yè)仰望星空的沖頂之路。

      AI發(fā)展的速度總是超出預(yù)期,可能今天覺得32卡就夠了,但明天DeepSeek的新模型,也許內(nèi)含更多專家,超大規(guī)模的超節(jié)點或許可以帶來更低的每token成本。所以,適當(dāng)超前,把超節(jié)點規(guī)模進(jìn)一步做大,可以給后續(xù)技術(shù)迭代留下一定的冗余。

      但對于更廣大的99%普通企業(yè)而言,需要的是腳踏實地的普惠之路。他們更迫切地希望,使用成本可控、穩(wěn)定可靠的超節(jié)點產(chǎn)品,解決當(dāng)下大模型落地的算力焦渴,支撐AI在生產(chǎn)力場景中落地。



      所以堆卡炫技之外,這條更合身的普惠之路,同樣勢在必行,不可偏廢。

      未來行業(yè)發(fā)展的理想狀態(tài),是這兩條路并行不悖。既有震撼世界的算力巨無霸,也有服務(wù)千行百業(yè)的普惠產(chǎn)品。企業(yè)無需關(guān)心超節(jié)點內(nèi)部有多少卡,只要插上電,AI就能跑起來,也不用擔(dān)心基礎(chǔ)設(shè)施的賬單出現(xiàn)天文數(shù)字。

      實現(xiàn)這一目標(biāo),只能靠智算廠商急企業(yè)之所急,將可靠性、每token成本、TCO等指標(biāo),同步納入超節(jié)點的研發(fā)技術(shù)路線圖。別忘了,讓企業(yè)用AI更省,才是超節(jié)點技術(shù)的核心價值,也是商業(yè)成功的前提。

      聲明:個人原創(chuàng),僅供參考

      特別聲明:以上內(nèi)容(如有圖片或視頻亦包括在內(nèi))為自媒體平臺“網(wǎng)易號”用戶上傳并發(fā)布,本平臺僅提供信息存儲服務(wù)。

      Notice: The content above (including the pictures and videos if any) is uploaded and posted by a user of NetEase Hao, which is a social media platform and only provides information storage services.

      相關(guān)推薦
      熱點推薦
      杜蘭特笑侃庫里:庫里毀了全明星賽,他和利拉德每次都亂扔中場三分

      杜蘭特笑侃庫里:庫里毀了全明星賽,他和利拉德每次都亂扔中場三分

      懂球帝
      2025-12-18 10:03:06
      楊穎與網(wǎng)紅好友聚餐!紅燒肉啤酒蛋糕不忌口,穿貂皮蹲墻角沒氣質(zhì)

      楊穎與網(wǎng)紅好友聚餐!紅燒肉啤酒蛋糕不忌口,穿貂皮蹲墻角沒氣質(zhì)

      陌識
      2025-12-17 18:07:06
      中國動真格了?美媒用3個最形容,日本人察覺不妙,準(zhǔn)備出國跑路

      中國動真格了?美媒用3個最形容,日本人察覺不妙,準(zhǔn)備出國跑路

      痛了還要扯著嘴角微笑
      2025-12-16 06:19:33
      給口碑最好的10部諜戰(zhàn)劇排名:《沉默的榮耀》第10,第1實至名歸

      給口碑最好的10部諜戰(zhàn)劇排名:《沉默的榮耀》第10,第1實至名歸

      皮皮電影
      2025-11-19 13:55:03
      94-87!不是陳林堅不是高詩巖,山東取勝功臣是他

      94-87!不是陳林堅不是高詩巖,山東取勝功臣是他

      林子說事
      2025-12-18 10:18:52
      夫妻常年分居,究竟有多危險?響水金店付某婷事件戳破了多少家庭

      夫妻常年分居,究竟有多危險?響水金店付某婷事件戳破了多少家庭

      沒有偏旁的常慶
      2025-11-27 08:00:06
      新加坡估計怎么也想不通一覺醒來,家門口的海南釜底抽薪

      新加坡估計怎么也想不通一覺醒來,家門口的海南釜底抽薪

      忠于法紀(jì)
      2025-12-12 09:14:49
      涉藏川渝鄂四省市,這一重大工程今日投運!

      涉藏川渝鄂四省市,這一重大工程今日投運!

      黃河新聞網(wǎng)呂梁頻道
      2025-12-18 14:51:57
      停產(chǎn)!漲價!囤貨!內(nèi)江有人已經(jīng)囤了10支...快看你家有嗎?

      停產(chǎn)!漲價!囤貨!內(nèi)江有人已經(jīng)囤了10支...快看你家有嗎?

      創(chuàng)作者_(dá)1479191106636
      2025-12-17 18:40:41
      準(zhǔn)備錐子、鐵錘等工具企圖對30多人動刑!尹錫悅宣布戒嚴(yán)當(dāng)晚,金建希與其激烈爭吵:因為你全搞砸了!特檢組:他還試圖誘導(dǎo)朝鮮武力攻擊

      準(zhǔn)備錐子、鐵錘等工具企圖對30多人動刑!尹錫悅宣布戒嚴(yán)當(dāng)晚,金建希與其激烈爭吵:因為你全搞砸了!特檢組:他還試圖誘導(dǎo)朝鮮武力攻擊

      每日經(jīng)濟(jì)新聞
      2025-12-16 09:09:04
      美俄悄悄握手,歐洲“變天”,突然的新格局,沒給中國留位兒?

      美俄悄悄握手,歐洲“變天”,突然的新格局,沒給中國留位兒?

      通文知史
      2025-12-17 21:00:06
      他以一己之力改變了戰(zhàn)爭進(jìn)程,一天之內(nèi)炸沉2艘航母的牛人

      他以一己之力改變了戰(zhàn)爭進(jìn)程,一天之內(nèi)炸沉2艘航母的牛人

      知兵堂軍事
      2025-12-17 10:32:13
      父母偏心到底有多傷人?網(wǎng)友:巴不得斷呢,多稀罕他們一樣

      父母偏心到底有多傷人?網(wǎng)友:巴不得斷呢,多稀罕他們一樣

      帶你感受人間冷暖
      2025-12-07 00:05:14
      61歲許亞軍近況曝光,未參加何晴葬禮,曝許何與后媽張澍真實關(guān)系

      61歲許亞軍近況曝光,未參加何晴葬禮,曝許何與后媽張澍真實關(guān)系

      180視角
      2025-12-16 12:16:09
      越扒瓜越大!女教師跳樓再添猛料,原來不止被父母逼婚這么簡單

      越扒瓜越大!女教師跳樓再添猛料,原來不止被父母逼婚這么簡單

      奇思妙想草葉君
      2025-12-18 16:14:11
      俄軍步兵遭受巨大傷亡畫面曝光!不計代價沖鋒,尸體鋪滿道路

      俄軍步兵遭受巨大傷亡畫面曝光!不計代價沖鋒,尸體鋪滿道路

      環(huán)球熱點快評
      2025-11-03 22:40:40
      銀河號事件再上演?美軍特種部隊突襲中國貨輪,逼船長交出違禁品

      銀河號事件再上演?美軍特種部隊突襲中國貨輪,逼船長交出違禁品

      阿傖說事
      2025-12-18 21:34:15
      福特號航母突然南下,特朗普開戰(zhàn)決心已定?中方關(guān)鍵時刻表態(tài)

      福特號航母突然南下,特朗普開戰(zhàn)決心已定?中方關(guān)鍵時刻表態(tài)

      李春光
      2025-12-18 15:35:06
      “牡丹花下死,做鬼也風(fēng)流”,這一次,74歲的張紀(jì)中徹底成了笑話

      “牡丹花下死,做鬼也風(fēng)流”,這一次,74歲的張紀(jì)中徹底成了笑話

      洲洲影視娛評
      2025-12-08 19:52:00
      中國不再警告,飛行員獲47秒開火權(quán),美日隱形戰(zhàn)機(jī)神話被終結(jié)

      中國不再警告,飛行員獲47秒開火權(quán),美日隱形戰(zhàn)機(jī)神話被終結(jié)

      書中自有顏如玉
      2025-12-18 12:13:18
      2025-12-18 22:56:49
      腦極體 incentive-icons
      腦極體
      從智能密鑰到已知盡頭
      3544文章數(shù) 167228關(guān)注度
      往期回顧 全部

      科技要聞

      2025新一代人工智能創(chuàng)業(yè)大賽總決賽收官

      頭條要聞

      在野黨參議員問了句日本"存亡危機(jī)" 高市早苗瞬間冷臉

      頭條要聞

      在野黨參議員問了句日本"存亡危機(jī)" 高市早苗瞬間冷臉

      體育要聞

      紐約尼克斯,板正的球隊

      娛樂要聞

      絲芭放大招了!實名舉報鞠婧祎經(jīng)濟(jì)犯罪

      財經(jīng)要聞

      尹艷林:呼吁加快2.5億新市民落戶進(jìn)程

      汽車要聞

      在零下30℃的考場里 凡爾賽C5 X和508L拿到了"穩(wěn)"的證明

      態(tài)度原創(chuàng)

      本地
      數(shù)碼
      教育
      藝術(shù)
      軍事航空

      本地新聞

      云游安徽|決戰(zhàn)烽火照古今,千秋一脈看宿州

      數(shù)碼要聞

      豪威集團(tuán)發(fā)布超低功耗單芯片全彩場序微顯示器賦能新一代智能眼鏡

      教育要聞

      所謂教育,不過是三分說,七分等

      藝術(shù)要聞

      卡洛斯·杜蘭:不只是薩金特的老師!

      軍事要聞

      福建艦入列后首過臺海 臺方談為何"甲板上沒有艦載機(jī)"

      無障礙瀏覽 進(jìn)入關(guān)懷版 主站蜘蛛池模板: 国产稚嫩高中生呻吟激情在线视频| 国产人妖乱国产精品人妖| 日韩精品无码人妻一区二区三区| 精品国产综合区久久久久久| 又大又紧又粉嫩18p少妇| 亚洲国产| jizz国产| 99久久婷婷国产综合精品| 日本三级香港三级人妇99| 亚洲最大成人网站在线观看| 玩弄人妻少妇500系列视频| 女人的精水喷出来视频| 蜜桃av无码免费看永久| 十八禁成人网站| 亚洲乱妇老熟女爽到高潮的片| 人人妻人人澡人人爽秒播| 色国产视频| 阿克陶县| 亚洲熟妇久久精品| 欧美性爱视频网站| 欧美777| 品精免费产品精品综合精品综合| 亚洲成在人线在线播放无码| 中文字幕久久久久人妻| 亚洲色图另类| 亚洲综合国产| 日韩av无码久久一区二区| 国产又色又爽又黄的网站免费| 国产人妖TS重口系列网站观看| 国产成人小视频| 免费无码一区二区三区蜜桃| 亚洲中文字幕av在线| 人妻精品久久久久中文字幕86| 国产精品无码v在线观看| 亚洲成A人片在线观看无码不卡| 99视频在线播放| 久久精品国产99国产精品| 国产裸拍裸体视频在线观看| 人人澡超碰碰97碰碰碰| 青冈县| 好紧好湿太硬了我太爽了视频|