国产午夜精品一区二区三区不卡_久在线精品视频_成人午夜网站_国内精品一区二区

首頁 > 活動線報 > 每日福利 > 創業界新高!聯想AMD AI服務器單機部署滿血版DeepSeek大模型,極限總吞吐高達6708 token/s!

創業界新高!聯想AMD AI服務器單機部署滿血版DeepSeek大模型,極限總吞吐高達6708 token/s!

發布時間:2025-03-17 22:08:44來源: 13041198719

3月17日電,今天,聯想宣布旗下首款AMD AI大模型訓練服務器聯想問天WA7785a G3在單機部署671B(滿血版) DeepSeek大模型時,可實現極限吞吐量6708token/s,將單臺服務器運行大模型的性能推向了新高,充分展現了聯想在AI基礎設施領域技術的深厚積淀與研發的快速響應能力。在AI算力競爭日趨白熱化的今天,聯想再次以硬核技術實力樹立了行業新標桿。

軟硬協同打造業界性能新標桿

依托聯想萬全異構智算平臺,聯想通過訪存優化、顯存優化、PCIe 5.0全互聯架構創新以及精選SGLang框架中性能最優算子等諸多創新方式,對大模型從預訓練、后訓練到推理的全流程進行持續優化,在單臺部署DeepSeek 671B大模型的聯想問天WA7785a G3上實測最高吞吐量達6708 token/s。

在模擬問題對話場景(上下文序列長度128/1K)時,最高可支持并發數158,TPOT 93毫秒, TTFT 2.01秒;而在模擬代碼生成(上下文序列長度512/4K )時,并發數可達140,TPOT 100毫秒, TTFT 5.53秒。

這一成績意味著單臺聯想問天WA7785a G3可以支撐1500人規模企業的正常使用,是繼聯想問天WA7780 G3服務器單機部署滿血版DeepSeek 大模型總吞吐量突破2500 token/s之后,單機部署該大模型推理性能的又一次突破。

此次突破是聯想中國基礎設施業務群、聯想研究院ICI實驗室和AMD聯合設計、協同調優、共同實現的。此結果也并非最終結果, 聯想與AMD 還在持續嘗試深度調優新方法。實現更高調優突破。

硬核配置構筑強大DeepSeek算力底座

聯想問天 WA7785a G3服務器是聯想與AMD雙方深度合作的智慧結晶,正是雙方通力合作帶來的技術創新、軟硬協同能力與架構突破為DeepSeek-R1滿血版大模型插上性能騰飛的翅膀。

強大算力引擎:聯想問天WA7785a G3搭載了2顆AMD處理器和8顆AMD新一代Instinct OAM GPU,它們為大模型訓練、推理等場景提供了強大的算力引擎。

超大顯存優勢:WA7785a G3擁有超大的顯存容量,單顆GPU的HBM3e顯存容量高達192GB,總計達1.5TB。超大顯存使得單機支持全量模型推理情況下,仍保留充足的KV緩存空間。而其顯存帶寬達到了驚人的5.3TB/s,GPU聚合帶寬達896GB/s,節點間網絡帶寬3.2TB/s,更高的帶寬可為推理解碼實現極致加速,充分滿足了大模型并行計算時對跨節點通信的高帶寬需求,使其成為用戶首選大模型推理服務器。

特有創新架構:聯想問天WA7785a G3的獨特架構設計也為最大程度地釋放算力潛能、突破帶寬限制發揮了關鍵作用,其三重獨立風道設計分別針對CPU節點、GPU節點和交換機節點進行精準散熱控制,提高了散熱效率,為服務器的穩定性和可靠性提供了有力保障。

未來,聯想將持續深化與產業伙伴的技術協作,通過架構創新、算法優化與硬件技術創新,不斷突破性能邊界,為各行業提供更高密度、更低能耗、更易部署的AI算力基礎設施,推動AI算力向更高效、更普惠、更可持續的方向演進,助力中國智算產業的持續發展。

每日福利更多>>

Android支持朋友圈實況動圖機型匯總,安卓用戶速查 iPadOS 19來襲,蘋果平板再進化,能否撼動Mac地位? 電腦卡頓崩潰?系統重裝終極指南:從備份到優化的10個必知步驟 保安大叔筆記本刷屏:一句 “慢即是快”,戳中多少中年人的焦慮心 利.多星智投合法靠譜嗎?薦股合法不合規,暗示高收益誘導股民交費升級服務可以退! 利.多星智投服務費怎么退?開通28800實戰班沒效果可以退,股民親述退費經過! 利.多星智投口碑怎么樣?不可信!交完服務費推的全是爛股!服務費已退! 利.多星智投可靠嗎?不可靠,薦股看似專業,購買會員毫無效果! 利.多星智投怎么樣?薦股不漲反賠!誘導交29800被騙!教你一招快速退費! 利.多星智投薦股靠譜嗎?不靠譜,給推薦的股票都是垃圾,虧損嚴重已退款 2025上海車展:新能源轎車戰場燃爆,車企絕招大比拼 試駕2025款小鵬G9的真實體驗分享:智能與豪華的完美融合 利.多星智投侯勃推薦的股票怎么樣?曝光收服務費薦股真相!維權已退款! 利.多星智投侯勃推薦的股票怎么樣?投資被騙真相曝光! 幸虧我要回來了! 注意防范! 利.多星智投內部金股可靠嗎?不可靠,騙取高額服務費騙局曝光! 可處理 利.多星智投內部金股可靠嗎?不可靠,騙局曝光。大家不要被蒙在鼓里了! 利.多星智投實戰特訓營可靠嗎?不靠譜,大騙子! 真相火冒三丈! 可追損 利.多星智投實戰特訓營可靠嗎?不靠譜,被騙內幕曝光! 親身告誡后悔不已! 利.多星智投股票推薦是否可靠?不可靠,騙局大曝光, 巨額虧損真相令人膽寒! 利.多星智投薦股怎么樣?曝光不為人知行業黑幕! 被騙服務費28800已追回! 利.多星智投口碑怎么樣?薦股合法不合規,暗示高收益誘導股民交費升級服務可以退! 利.多星智投口碑怎么樣?虛假宣傳坑股民千萬別信,薦股套路真相大白,已退款! 利.多星智投口碑怎么樣?不可信!交完服務費推的全是爛股!服務費已退! 利.多星智投口碑怎么樣?不可靠,薦股毫無水平,宣傳的和實際的根本不是一回事! 利.多星智投口碑怎么樣?不可信!千萬不要上當!維權已退款! 利.多星智投口碑怎么樣?不靠譜,給推薦的股票都是垃圾,虧損嚴重已退款 10萬以內的高安全之選:埃安UT 宏碁瑞典官網鬧烏龍!將顯卡名稱標注為“Radeon RX 9070 GRE XT” 央企人工智能發展分析報告 | 人工智能的未來前景與產業賦能 首場直播成功!國家大劇院\"第二現場\"百城千幕,全國同啟!