您的当前位置:首页 >许茹芸 >華為發表 AI 新技術「UCM」,擺脫 HBM 依賴、AI 推理速度暴增 90% 正文
时间:2025-11-08 15:33:22 来源:网络整理编辑:许茹芸
采用先进多Agent架构,整合传统六爻智慧与现代AI技术, 提供智能化知识检索、专业占卜解析与深度理解能力。 让古老的六爻文化在AI时代焕发新的活力。
由於美國出口限制,中國很難獲得 HBM 等關鍵資源。對此,華為打算幫助中國科技市場不再依賴 HBM。根據市場消息,華為開發一款名為「統一快取管理器」(Unified Cache Manager,簡稱 UCM)的新軟體工具,無需使用 HBM 即可加速大型語言模型(LLM)的訓練與推理。
華為週二(12 日)在 2025 金融 AI 推理應用落地與發展論壇上發表 UCM 工具。該軟體根據不同記憶體類型的延遲特性,以及各類 AI 應用的延遲需求,將 AI 資料分配在 HBM、標準 DRAM 與 SSD 之間。
華為資料儲存產品副總裁躍峰指出,目前 AI 推理面臨三大問題:「推不動」(輸入內容太長超出處理範圍)、「推得慢」(回應速度太慢)、「推得貴」(運算成本太高)。
UCM 透過「分層記憶」的 Key-Value 快取架構,根據系統的可用資源速度最大化。
據介紹,華為這次發布的 UCM,是做為一款以 KV 快取(KV Cache)為中心的推理加速套件,融合多類型緩存加速演算法工具,分級管理推理過程中產生的 KV 快取記憶數據,擴大推理上下文視窗,實現高吞吐、低時延的推理體驗,並降低每 Token 推理成本。
UCM 在發表前已進行過長時間的實際應用測試。周躍峰指出,UCM 曾在中國銀聯中試用,應用場景包括「客戶語音分析、行銷規劃與辦公協助」。根據華為數據,搭配傳統快取與儲存技術的系統,在 AI 推理任務中使用 UCM,可將延遲降低最高達 90%,吞吐量提升至 22 倍。
華為計劃 9 月正式開源 UCM,屆時將在魔擎社區首發,後續逐步貢獻給業界主流推理引擎社群,並共享給業內所有 Share Everything(共享架構)儲存廠商和生態夥伴。
由於目前 HBM 晶片幾乎全由 SK 海力士、三星及美光生產,而美國一直致力於阻撓中國購買或自製 HBM,而 UCM 的出現有望擺脫美國牽制,加速中國晶片技術自主化。
(首圖來源:Flickr/Web Summit CC BY 2.0)
文章看完覺得有幫助,何不給我們一個鼓勵
請我們喝杯咖啡您的咖啡贊助將是讓我們持續走下去的動力
總金額共新臺幣 0 元 《關於請喝咖啡的 Q & A》 取消 確認斯基拉:尤文总经理科莫利下个月将升任俱乐部CEO2025-11-08 19:56
CORTIS出道专辑《COLOR OUTSIDE THE LINES》已连续四周登上Billboard榜单2025-11-08 19:00
收评:沪指高开高走涨1.32% 全市场近百股涨停2025-11-08 18:53
世界微动态丨央行有关部门负责人答记者问2025-11-08 18:51
台风“桦加沙”已致台湾17死32伤2025-11-08 18:37
特朗普:他们会找个理由不把奖颁给我2025-11-08 18:23
湖北恩施地区发现页岩气资源超千亿方 红页2HF井页岩气产量稳定2025-11-08 17:51
印媒:阿富汗一男孩藏身起落架舱飞到印度2025-11-08 17:50
全球快报:荣耀声纹识别专利公布 可更准确识别戴口罩时所发语音2025-11-08 17:39
SEVENTEEN S.COUPS x 金珉奎首张迷你专辑《HYPE VIBES》发行首日销量达到60万张2025-11-08 17:30
朝鲜导弹总局进行碳纤维固体燃料发动机地上点火试验2025-11-08 20:10
特朗普:他们会找个理由不把奖颁给我2025-11-08 19:46
项昊宇:对石平的制裁也是对日本右翼的警告2025-11-08 19:32
桦加沙强度正在减弱中2025-11-08 19:23
韩国人“震惊、愤怒”,特朗普警告2025-11-08 19:07
北京大学教授俞孔坚在巴西坠机遇难2025-11-08 19:06
耶路撒冷上空响起防空警报2025-11-08 19:05
BLACKPINK新曲《JUMP》Spotify突破3亿次流媒体 刷新K2025-11-08 18:44
泰国最高法院判决前总理他信须重新服刑1年2025-11-08 18:32
防弹少年团Jin《Don't Say You Love Me》Spotify流媒突破5亿2025-11-08 17:47