AI News

AI 基礎設施的新前沿:OpenAI 向客製化矽晶片的戰略轉型

在一項象徵軟硬體深度整合的里程碑式決策中,OpenAI 正式發表了 Jalapeño,這是該公司首款客製化 AI 推論晶片。此舉是在與半導體巨頭 Broadcom 的戰略合作下開發而成,標誌著 OpenAI 正積極進軍客製化矽晶片領域。透過從單純的軟體與模型研究實體轉型為整合型 AI 系統開發商,OpenAI 正在從根本上改變其成長軌跡以及對外部硬體供應商的依賴。

隨著對高效能運算能力需求的持續攀升,AI 發展的瓶頸已從原始模型訓練轉向高效、可擴展的推論。藉由 Jalapeño,OpenAI 旨在優化其生成式 AI(Generative AI)模型的部署階段,在維持龐大用戶群所需效能標準的同時,有效降低單次查詢成本。

戰略聯盟:為何選擇 Broadcom?

開發客製化 AI 推論晶片是一項艱鉅的任務,通常僅由擁有數十年硬體專業經驗的組織所掌握。OpenAI 決定與 Broadcom 合作,是為了規避晶片設計與製造相關風險的一項審慎決策。Broadcom 在 ASIC(特殊應用積體電路)設計方面擁有豐富經驗及穩固的供應鏈,能為將 OpenAI 的架構規範轉化為實體矽晶片提供必要的工程框架。

對 OpenAI 而言,這項合作並非要放棄與 NVIDIA 等公司的現有夥伴關係,而是為了進行多元化與架構控制。雖然 NVIDIA 仍是訓練叢集的王者,但 OpenAI 推出的 Jalapeño 專注於推論領域——亦即 AI 模型「思考」並回應使用者提示的階段。

OpenAI 與 Broadcom 合作的關鍵協同效應

合作特點 對 OpenAI 的戰略效益
特定領域架構 將晶片的記憶體頻寬與算術單元針對 OpenAI 的 Transformer 模型進行調整
供應鏈穩定性 利用 Broadcom 與台積電(TSMC)等晶圓廠的既有關係,確保生產產能
成本優化 降低對通用矽晶片的長期依賴,以削減推論營運支出

解碼 Jalapeño 架構

與專為處理各類運算任務而設計的通用 GPU 不同,Jalapeño 是一款專用的推論加速器。其設計理念核心在於極大化輸運量並極小化大型語言模型(LLMs)的延遲。根據業界見解,Jalapeño 晶片採用了先進的高頻寬記憶體(HBM)整合技術,使其能以前所未有的速度處理龐大的參數集。

該晶片整合了多項使其區別於標準解決方案的創新:

  • 優化的記憶體層級: 專為處理 Transformer 模型記憶體密集型的特性而設計,減少資料移動的瓶頸。
  • 預測式推論排程: 硬體層級的最佳化,與最新 OpenAI 模型特定的操作流程完美對齊。
  • 能源效率目標: 專注於每瓦推論效能(inference-per-watt),為永續的全球資料中心提供動力。

重塑 AI 硬體生態系統

Jalapeño 的發布在硬體產業引發了震撼。透過將推論硬體內化,OpenAI 能夠降低其對通用 GPU 市場需求與供應週期性波動的敏感度。此轉型不禁讓人想起其他科技巨頭,例如 Google 的 TPU(張量處理單元)以及 Amazon 的 Inferentia 晶片,兩者均從客製化硬體中獲得了巨大的成本效益。

AI 硬體供應商比較格局

實體 主要硬體焦點 市場定位
NVIDIA 通用 H100/B200 GPU 訓練與研究的「黃金標準」
OpenAI (Jalapeño) 專用推論加速器 效率、低延遲與模型專用調整
Google TPU (張量處理單元) 雲端整合企業 AI 擴展

Creati.ai 與產業的未來之路

對於 Creati.ai 的讀者來說,Jalapeño 的發表清楚暗示了「AI 淘金熱」正轉向硬體垂直整合。我們正進入一個模型效能與基礎矽晶片密不可分的時代。隨著 OpenAI 繼續部署其客製化基礎設施,我們預期看到他們在即時推理模型領域拓展新的邊界。

然而,這段歷程不會沒有挑戰。競爭環境日益緊迫,要跟上模型開發的快速迭代週期,將要求 OpenAI 不斷更新其晶片架構。Jalapeño 是否能在下一代通用硬體的競爭中保持優勢,仍是分析師與業界觀察家最迫切關心的問題。

有一點是肯定的:隨著將「Jalapeño」帶入其廚房(開發體系),OpenAI 已向 AI 生成領域的全端主導地位邁出了最重要的一步。在觀察這一演進的同時,Creati.ai 將持續致力於追蹤這些硬體開發如何轉化為您日常使用的 AI 模型中突破性的新能力。

精選

OpenAI 釋出首款與 Broadcom 共同打造的客製化 AI 推論晶片 Jalapeño

OpenAI 與 Broadcom 亮相 Jalapeño,這是 OpenAI 首款客製化 AI 加速晶片,專為推論工作負載打造,並使用 OpenAI 自有模型開發。