黔西南挚桶广告传媒有限公司

世界滾動:面向大模型訓練,騰訊發布超強算力集群,性能提升三倍!

就在剛剛,騰訊發布了號稱國內性能最強的大模型計算集群。

據騰訊微信公眾號4月14日消息,騰訊云正式發布面向大模型訓練的新一代HCC(High-Performance Computing Cluster)高性能計算集群。

該集群采用騰訊云星星海自研服務器,搭載英偉達最新代次H800 GPU,服務器之間采用業界最高的3.2T超高互聯帶寬,為大模型訓練、自動駕駛、科學計算等提供高性能、高帶寬和低延遲的集群算力。


(資料圖片僅供參考)

據騰訊介紹,實測顯示,新一代集群整體性能比過去提升了3倍,是國內性能最強的大模型計算集群。

早在去年10月,騰訊訓練框架AngelPTM,完成了首個萬億參數大模型訓練——混元NLP大模型訓練。在同等數據集下,將訓練時間由 50 天縮短到 11 天。如果基于新一代集群,訓練時間將進一步縮短至 4 天。

針對大模型場景,星星海自研服務器采用 6U 超高密度設計,相較行業可支持的上架密度提高 30%;利用并行計算理念,通過 CPU 和 GPU 節點的一體化設計,將單點算力性能提升至更高。

除此以外,H800 GPU也是新集群的一大看點。公開資料顯示,H800為英偉達旗下最先進的芯片之一,對人工智能研發極為重要,其算力超過旗艦芯片A100三倍,這也是國內首次發布搭載H800的大模型產品。

網絡層面,騰訊發布自研的星脈網絡能提供3.2T通信帶寬,為業內最高數據。

騰訊表示,搭載同樣的GPU卡,3.2T星脈網絡相較前代網絡,能讓集群整體算力提升20%,使得超大算力集群仍然能保持通信開銷比和吞吐性能。并提供單集群高達十萬卡級別的組網規模,支持更大規模的大模型訓練及推理。

存儲層面,幾千臺計算節點同時讀取一批數據集,需要盡可能縮短加載時長。騰訊云自研的文件存儲、對象存儲架構,具備TB級吞吐能力和千萬級IOPS,滿足大模型訓練的大數據量存儲要求。

新一代集群還集成了騰訊云自研的?TACO 訓練加速引擎,對網絡協議、通信策略、AI 框架、模型編譯進行大量系統級優化,大幅節約訓練調優和算力成本。

另外,騰訊自研芯片已經量產,包括用于AI推理的紫霄芯片。它采用自研存算架構和自研加速模塊,可以提供高達3倍的計算加速性能和超過45%的整體成本節省。

在上月召開的電話會議上,騰訊方面表示,未來將投入大量資源并建立自己的基礎模型,并將其整合進公司的所有業務中。不過騰訊表示,將做對的事,不會倉促行事。

騰訊還說,AIGC可以用來提升騰訊旗下旗艦產品的用戶體驗。未來可能每一個用戶都會有人工智能助理,如果效果好,有可能將生成式AI納入微信和QQ。

風險提示及免責條款 市場有風險,投資需謹慎。本文不構成個人投資建議,也未考慮到個別用戶特殊的投資目標、財務狀況或需要。用戶應考慮本文中的任何意見、觀點或結論是否符合其特定狀況。據此投資,責任自負。

關鍵詞:

178足球免费直播手机版下载| 极速体育吧NBA直播| 178体育app官网下载| jrs低调看高清直播NBA无插件| 黑白直播官方免费下载安装| 手机足球直播app| whoscored足球数据网| 雨燕体育直播| 178看球直播app下载| 人人体育官网版| 01体育赛事免费直播| 蓝鲸体育app下载安卓版本安装| 883足球免费直播| 今天最稳的足球推荐| jrs低调看高清直播免费| 看球直播app下载官网最新版| jrs低调看球免费nba高清直播| JRS低调看球免费高清视频直播| 365体育平台介绍| 蓝鲸体育直播app安卓版| 足球直播免费高清视频| 88体育是正规平台吗| 足球直播软件app免费| 足球今晚比赛cctv5直播| 雨燕360体育免费直播nba| 手机看中超直播比赛| 亚美体育APP官方网站| 足球比赛最全的app| 196体育app官网下载最新版本| 球赛直播app哪个最全| nba直播jrs在线观看免费| 实况足球国际服下载2024| 斗球app官网苹果下载安装| 今晚足球比赛在哪可以看直播| nba新浪网体育| 免费看球赛的软件| 足球直播软件app免费| 蓝鲸体育app官方下载| 足球免费直播软件| 蓝鲸体育直播app安卓版| 亚美体育app官网在线登录|