久久ER99热精品一区二区-久久精品99国产精品日本-久久精品免费一区二区三区-久久综合九色综合欧美狠狠

新聞中心

EEPW首頁 > 智能計(jì)算 > 業(yè)界動(dòng)態(tài) > 英特爾Gaudi 2E AI加速器為DeepSeek-V3.1提供加速支持

英特爾Gaudi 2E AI加速器為DeepSeek-V3.1提供加速支持

作者: 時(shí)間:2025-08-27 來源:EEPW 收藏

? Gaudi 2E AI加速器現(xiàn)已為-V3.1提供深度優(yōu)化支持。憑借出色的性能和成本效益,Gaudi 2E以更低的投入、更高的效率,實(shí)現(xiàn)從模型訓(xùn)練的深度突破到推理部署的實(shí)時(shí)響應(yīng),為大模型的加速落地提供新選擇。 

image.png

Gaudi 2E配備96 GB大容量內(nèi)存,搭載先進(jìn)的HBM控制器,針對(duì)隨機(jī)訪問、線性訪問場景進(jìn)行深度優(yōu)化,有效避免了AI訓(xùn)練或推理任務(wù)的延遲,從而保障了計(jì)算流程的流暢性。英特爾Gaudi 2E擁有卓越的可擴(kuò)展能力,支持多卡互聯(lián),為用戶提供了靈活的、可定制化的解決方案,滿足其不斷變化的AI需求。 

英特爾Gaudi 2E以出色的適配性和易用性,為諸多大模型應(yīng)用提供支持。實(shí)測(cè)數(shù)據(jù)顯示,在英特爾Gaudi 2E的支持下,-V3.1無論是在問答還是編碼上,能力都有著顯著提升:在部署了8張英特爾Gaudi 2E的一體機(jī)服務(wù)器上運(yùn)行-V3.1模型,在輸入/輸出token長度均為1k、多用戶并發(fā)數(shù)為30的條件下,每個(gè)并發(fā)token生成速率達(dá)到每秒10 token;在輸入/輸出token長度均為2k、多用戶并發(fā)數(shù)為28的條件下,每個(gè)并發(fā)token生成速率達(dá)到每秒10 token。 

無論是要求邏輯嚴(yán)密的數(shù)學(xué)計(jì)算還是考驗(yàn)分析能力的知識(shí)理解,基于英特爾Gaudi 2EDeepSeek-V3.1均能迅速響應(yīng),高效完成解析。這種強(qiáng)大的組合,不僅大幅提升了問題解決的效率,更助力用戶在多維度、高難度的推理場景中輕松跨越障礙。

image.png

通過開放的架構(gòu)、強(qiáng)大的技術(shù)支持和緊密的生態(tài)合作,英特爾將持續(xù)賦能AI產(chǎn)業(yè)的創(chuàng)新與發(fā)展,加速AI大模型技術(shù)的普惠落地。


關(guān)鍵詞: 英特爾 AI加速器 DeepSeek

評(píng)論


相關(guān)推薦

技術(shù)專區(qū)

關(guān)閉