• 登入
  • 註冊網站會員
CIO Taiwan
  • 活動
  • 影音
  • 趨勢分析
  • CIO 雜誌
  • CISO精選
  • 電子報
  • 下載
  • 聯繫我們
沒有結果
查看所有結果
CIO Taiwan
沒有結果
查看所有結果
首頁 產業速報

AI 基礎架構的下一場標準戰,從連接力開始

2026-06-04
分類 : 產業速報
0
A A
0
AI 基礎架構的下一場標準戰,從連接力開始

◤ Matt Murphy,Chairman and CEO, Marvell

Marvell Chairman and CEO Matt Murphy 在 Computex 2026 的演說,以及 NVIDIA 執行長黃仁勳的同台演出,讓下一代 AI 基礎架構的連接標準更加清晰。

編撰/何信達


AI 基礎架構的核心挑戰,仍不斷在演變。

第一波是算力。當大型語言模型需要前所未有的運算密度,NVIDIA 領導了這場革命,並成為全球第一家市值五兆美元的公司;第二波是記憶體。更大的模型需要更高的頻寬與容量,記憶體供應商加速跟上,市場同樣誕生了數家兆美元級的企業。

現在,挑戰的核心正在轉移到第三個位置:連接力/連接性能。

依據全球主要超大規模雲端供應商——包括 Google、Amazon、Microsoft、Meta——正在重新設計整個網路架構,這些工程團隊面對的現況是:當 AI 叢集規模持續擴大,頻寬與延遲的限制,已經成為制約整體系統效能的主要因素。

驅動這個轉變的,是 AI 工作負載性質的根本變化。三類新興工作負載尤其關鍵。

第一是 Reasoning Model(推理模型)——相較於直接輸出答案的前一代模型,推理模型會在回答前進行多輪內部推演,每一輪推演都產生大量中間資料需要在系統內部傳遞。

第二是 Mixture of Experts(MoE,混合專家架構)——這類模型把不同任務分配給專門的子模型處理,不同子模型之間需要持續協調與溝通,資料移動量因此大幅提升。

第三是 Agentic AI(代理式 AI)——AI 系統不再只是回答問題,而是自主規劃、呼叫工具、存取記憶體、協調多個子任務,每個動作都涉及跨元件的資料傳遞。

這三類工作負載有一個共同結果:需要在基礎架構內部移動的資料量,遠超過前一代模型,推動頻寬需求持續攀升,也讓連接性能從配角變成了決定系統天花板的關鍵變數。

這便是理解 Computex 2026 Marvell 主題演講的基本框架,也是 NVIDIA 在演講前兩個月投資 Marvell 20 億美元、雙方透過 NVLink Fusion 建立策略夥伴關係的產業背景。兩家公司的結盟,正在定義下一代 AI 基礎架構的連接標準——而這個標準,將成為所有 IT 決策者設備選型的上游約束。

內容目錄 隱藏
銅纜的物理極限,與光纖進機架的必然
NVIDIA 與 Marvell 結盟卡位連接標準
從銅纜到光纖的每一段距離,都是不同的工程問題
1. 跨資料中心連接(Scale Across)
2. 機架之間的連接(Scale Out)
3. 機架內部的處理器互連(Scale Up)
4. 封裝內部的晶片互連(Die-to-Die)
連接性能,正在成為 AI 基礎架構的新地基

銅纜的物理極限,與光纖進機架的必然

連接性能成為核心挑戰,是因為背後有一個具體的物理事實正在發生。

銅纜傳輸訊號有一道距離上限,Murphy 在演講中稱之為「銅纜牆(Copper Wall)」。決定這道牆位置的,是一條物理定律:頻寬與距離成反比,傳輸速率每翻倍,銅纜能維持訊號品質的距離就縮短一半。原因在於,高速訊號的頻率更高,在銅纜中衰減得更快,可用距離因此隨之縮短。

以目前量產主流的 200 Gbps/lane 系統為例,銅纜可用距離約為 2.5 公尺——剛好是一個標準機架含內部走線的極限長度。進入下一代 400 Gbps 後,對應的訊號頻率使銅纜可用距離低於機架內完整佈線的需求,機架內部的節點無法全部以銅纜互連。這道牆,從機架與機架之間,縮進了機架內部本身。

Murphy 指出,400 Gbps 的部署正在進行,台灣供應鏈已在為此準備產能。

銅纜牆移入機架,帶出下一個技術命題:光纖必須跟進。但這不是把現有光纖模組塞進機架就能解決的問題。機架內部的連接點數量,約是機架之間的十倍,現有插拔式光纖模組(pluggable transceiver)的功耗與體積密度,在這個尺度下行不通。

[ 加入 CIO Taiwan 官方 LINE 、 Facebook 與 LinkedIn,與全球CIO同步獲取精華見解 ]

因此業界發展出 CPO(Co-Packaged Optics,共封裝光學)。做法是把光學連接直接整合進晶片封裝,緊鄰運算或交換晶片,讓光訊號從封裝邊緣直接出發,消除銅線走線,同時大幅降低功耗、提升密度。Murphy 在演講現場展示了 Marvell 51.2T CPO 交換器實品:交換晶片居中,16 個 3.2T 光學引擎環繞四周,光纖直接接上封裝,不經過電路板。

CPO 的部署時間表已逐漸清晰。Corning 預測 2026 年新建 AI 叢集將開始進行 CPO 的實地試驗部署;NVIDIA 則宣布 CPO 將於 2028 年隨 Feynman 平台進入規模量產。對正在規劃 AI 機房的 IT 決策者而言,這個時間表意味著:未來兩到三年內採購的交換器與伺服器,其連接規格的選擇,將直接受到 CPO 量產進程的影響。

NVIDIA 與 Marvell 結盟卡位連接標準

理解這場演講還有一個關鍵,為什麼 NVIDIA 共同站台?

2026 年 3 月 31 日,NVIDIA 宣布投資 Marvell 20 億美元,雙方透過 NVLink Fusion 建立策略夥伴關係。這是 NVIDIA 同期在光學連接領域連續出手的一部分——同月稍早,NVIDIA 已分別投資光學元件供應商 Lumentum 與 Coherent 各 20 億美元,目的是確保共封裝光學所需的雷射產能。

這三筆投資放在一起看,邏輯更加完整:NVIDIA 正在沿著整條光學連接供應鏈,逐一確保關鍵環節的產能與技術主導權。Marvell 負責晶片與封裝,Lumentum 與 Coherent 負責雷射光源。

NVLink Fusion 是這個佈局的核心機制。它是一個機架級平台,允許超大規模雲端供應商在採用 NVIDIA 架構的同時,加入客製化晶片——例如 AWS 或 Google 自行設計的 XPU。Marvell 在合作中提供客製 XPU 與相容 NVLink Fusion 的 Scale-Up 網路;NVIDIA 則提供 Vera CPU、ConnectX 網路介面卡、BlueField DPU、NVLink 互連與 Spectrum-X 交換器作為配套。

[ 推薦閱讀:黃仁勳演講,有哪些 Agentic AI 架構認知你需要更新? ]

NVIDIA 執行長黃仁勳在演講中對這個架構的描述直接而清楚:就算客戶必須設計自己的 ASIC,NVIDIA 仍然樂於在那個資料中心裡佔有一席之地。客戶不需要全部買 NVIDIA,但至少買一部分。

這句話點出了 NVLink Fusion 的本質:它是一個需要包含至少一個 NVIDIA 元件才能運作的生態系平台。客戶獲得了客製化的彈性,NVIDIA 也確保了在每一套 AI 基礎架構中的存在。對 Marvell 而言,這個合作把自身的客製晶片業務,直接嵌入了目前規模最大、生態最完整的 AI 基礎架構體系。

對 IT 決策者而言,這個結構的意涵:當你的雲端服務供應商或設備廠商在建置下一代 AI 基礎架構時,他們的連接架構選擇,愈來愈可能沿著這個 NVIDIA-Marvell 的技術軌道走。也許你的採購選擇不需要直接面對 Marvell,但相關的設備其連接規格的上限與路線,已經在這個層次被定義。

從銅纜到光纖的每一段距離,都是不同的工程問題

提到連接標準的走向,需要先理解一件事:AI 資料中心的連接,不是一個問題,是四個。

Murphy 用距離來拆解這個複雜度。從資料中心之間的數百公里,到晶片封裝內部的數毫米,每一段距離需要完全不同的技術、不同的工程團隊、不同的供應鏈。

1. 跨資料中心連接(Scale Across)

距離可達數百甚至上千公里,使用同調調變(Coherent Modulation)技術。核心元件是同調 DSP,負責把大量資料推送過光纖並維持極高訊號可靠度。Marvell 在這個領域有超過十年量產紀錄,從 100G、400G、800G,今年下半年將推出 COLORZ 1600——搭載 Electra 2 奈米同調 DSP,業界第一款 2 奈米 1.6T ZR/ZR+ 同調光學解決方案,開始對客戶送樣。

2. 機架之間的連接(Scale Out)

資料中心內部,機架與機架之間透過交換器與光纖建構網路骨幹。距離較短,採用功耗更優化的 PAM4 調變技術。Marvell 的 PAM4 DSP 從 50G 演進至 800G,去年開始量產 1.6T 3 奈米方案。Computex 同期發表的 Teralynx T100(102.4 Tbps),3 奈米製程,專為 AI 資料中心設計,較競爭產品低 25% 功耗,本季開始送樣。

3. 機架內部的處理器互連(Scale Up)

目標是讓機架內最大數量的處理器彼此直接溝通,任意兩個處理器之間都能直接傳輸,不需要中繼。這個層級目前仍是銅纜的領域,核心技術是高速電氣 SerDes(序列器/解序列器)。Marvell 目前量產 200 Gbps/lane 電氣 SerDes,並已展示下一代 400 Gbps 技術。隨著頻寬需求推進至 400 Gbps,這也是 CPO 即將接管的層級。

4. 封裝內部的晶片互連(Die-to-Die)

現代 AI 晶片通常由多個 chiplet 組成,封裝內部的晶片之間需要超高速、極短距離的互連介面,單位是毫米乃至微米。Marvell 的 die-to-die SerDes 與先進封裝能力,讓客戶得以建構複雜的多晶片設計。這個層級的技術選擇在晶片設計階段就已決定,不在設備採購的選項範圍內。

這個分層架構對 IT 決策者的意義是:當設備供應商談到「升級連接規格」,指的可能是這四個層級中的任何一個,每個層級的技術成熟度、量產時間表與成本結構各不相同。跨資料中心與機架之間的光纖化已是現實;機架內部的光纖化正在進入量產前夕;封裝內部的互連則在你的採購決策之前就已定型。知道自己面對的是哪一層,才能判斷供應商的技術路線是否與你的建置時程吻合。

連接性能,正在成為 AI 基礎架構的新地基

過去幾年,AI 基礎架構的討論幾乎都圍繞著算力——GPU 規格、模型參數量、訓練成本。這場演講提醒我們,當 AI 工作負載從單一大模型推論,演變為多個 Agent 協作、跨節點推演、持續存取長期記憶,資料在系統內部的移動方式也根本改變了。更多資料、更短時間、更多節點——這三件事同時發生,讓連接性能從背景條件變成了前景問題。

銅纜的物理極限不是突然出現的,它一直都在,只是 AI 工作負載的演變,讓這道牆提前到來。

光纖接管機架內部連接這件事,現在已經有清晰的技術路徑與時間表。CPO 不再是實驗室裡的概念,NVIDIA 與 Marvell 的結盟,讓這條路徑有了生態系的支撐。台灣的封裝廠、光學模組廠、ODM,正是把這條路徑從設計圖變成量產現實的執行者。


(本文授權非營利轉載,請註明出處:CIO Taiwan)

Image 271
標籤: 人工智慧基礎架構
上一篇文章

Intel 技術全面賦能基礎設施,橫跨資料中心、AI 與邊緣運算

下一篇文章

當 AI Agent 開始做事,CISO 真正該管的是什麼

相關文章

AI 對抗 AI 資安攻防升級 資安院布局 Agentic AI 強化威脅偵測
產業速報

AI 對抗 AI 資安攻防升級 資安院布局 Agentic AI 強化威脅偵測

2026-10-05
1200x630 I157s03 1
產業速報

GitLab 最高 10 分重大漏洞已遭利用 資安署籲儘速更新強化資安防護

2026-10-02
【影】無人機從巡檢走向物流 掌握通訊、AI 與資料整合的規模化關鍵
產業速報

【影】無人機從巡檢走向物流 掌握通訊、AI 與資料整合的規模化關鍵

2026-10-02
下一篇文章

Palo Alto Networks 完成收購 Portkey,強化 AI 代理安全防護Portkey 透過控制平面擴展 Prisma AIRS 功能,可大規模監控、協調與治理自主 AI 代理

2026 Elite Vendor

追蹤我們的 Facebook

近期文章

  • 浪費竟藏在等簽名裡?用 AI 當教練抓出工廠隱形耗損!
  • 華碩十度榮登《Forbes》全球最佳雇主 以 AI 賦能人才成長與創新
  • 智慧停車場新標竿 華碩智行全球首創防災與尋車四合一新科技
  • AI 算力版圖再擴張:GMI Cloud 獲 6.6 億美元融資,台灣成關鍵樞紐
  • AMD收購World Labs以推進AI運算未來發展

📈 CIO點閱文章週排行

  • 華碩智行推出全球首創具專利的「四合一熱顯像車在席裝置」,整合AI熱顯感知、車牌辨識、車在席偵測、影像錄影功能

    智慧停車場新標竿 華碩智行全球首創防災與尋車四合一新科技

    0 分享
    分享 0 Tweet 0
  • 打造世界級醫院資安:邁向國際最高標準

    0 分享
    分享 0 Tweet 0
  • GitLab 最高 10 分重大漏洞已遭利用 資安署籲儘速更新強化資安防護

    0 分享
    分享 0 Tweet 0
  • 系統整合 台商轉型下一步

    0 分享
    分享 0 Tweet 0
  • 決戰下一個紀元!超級智慧的宏大意涵與大國賽局

    0 分享
    分享 0 Tweet 0
  • 微軟的 AI 教育承諾:守護學生,強化學習

    0 分享
    分享 0 Tweet 0
  • 以「自適應 AI 治理循環」管理「地下 AI 與模型技術債」

    0 分享
    分享 0 Tweet 0
  • 員工私下偷偷用 AI 怎麼辦?搞懂治理飛輪,把資安危機變成轉型動能!

    0 分享
    分享 0 Tweet 0
  • 用 AI 教練畫出工廠的價值流地圖 VSM 與永續價值流地圖 Sus-VSM

    0 分享
    分享 0 Tweet 0
  • 【專訪】偉勝乾燥總經理陳玟翰:設備資安左移,前瞻布局 SEMI E187

    0 分享
    分享 0 Tweet 0

數位及平面

  • CIO Taiwan 網站
  • CIO 雜誌紙本
  • CIO 雜誌 HYREAD 版
  • CIO 雜誌 Zinio 版

關注社群

  • Line 加入好友
  • Facebook 粉絲頁

合作夥伴

  • CIO 協進會

關於我們

  • 公司介紹及工作機會
  • 隱私權政策

旗訊科技股份有限公司|統編:84493719|台北市 100 中正區杭州南路一段 15-1 號 19 樓|TEL: 886-2-23214335
Copyright © Flag Information Co.,Ltd. All Rights Reserved.

CIO Taiwan 歡迎你回來!

可用 使用者名稱 或 Email 登入

忘記密碼 註冊

歡迎註冊 CIO Taiwan 網站會員

請設定 Email 及 使用者名稱(使用者名稱不接受中文、將來無法更改)

欄位皆為必填 登入

找回密碼

請輸入 使用者名稱 或 Email 以重設密碼

登入
  • 登入
  • 註冊
沒有結果
查看所有結果
  • 活動
  • 影音
  • 產業速報
  • 新聞速寫
  • 風雲人物
  • 產業瞭望
  • 專欄
  • 精選文章
  • 原生現場
  • 供應商視野
  • 線上調查
  • CIO 雜誌
  • 電子報
  • 下載
  • 聯繫我們

© 2020 CIO Taiwan 版權所有

7/28 活動延期通知

因高雄市政府於7/28早上宣布全日停班停課,因此「智慧醫療研討會高雄場」活動延期舉辦。主辦單位將另行公告研討會相關訊息,歡迎報名參加!

您已閒置超過 3 分鐘了,為您推薦其他文章!點擊空白處、ESC 鍵或關閉回到網頁

CRA 進入實戰階段 台灣 ICT 從合規應對走向產品安全治理

整理/鄭宜芬 適逢歐盟《網路韌性法案》(Cyber Resilience Act

「穩定幣暨虛擬資產安全聯盟」成立 建立完整數位金融整合平台

整理/鄭宜芬 隨著《虛擬資產服務法》通過,台灣數位金融正式進入合規落地階段,金融

【專訪】旋宇科技執行長曾思遠:重塑工作流程,提升企業 AI 成熟度。

利用 AI 提升生產力人人會用,但真正要創造企業競爭優勢,端看如何將 AI 與企

別再叫 AI 幫你想點子!17 種創新工具寫進一段提示詞,讓它改當教練逼問你

AI 在創新上最有用的角色是教練,不是顧問。提示詞把主流的 17 種創新工具編排

1200x630 I157s03 1

GitLab 最高 10 分重大漏洞已遭利用 資安署籲儘速更新強化資安防護

整理/鄭宜芬 數位發展部資通安全署今(2)日表示,GitLab 近期發布重大資安

台積電等 14 家企業赴矽谷攬才 國發會 Talent Taiwan 首設海外據點

整理/鄭宜芬 當全球 AI、半導體人才競爭加劇,企業如何取得關鍵科技人才,已成為

從 AI 到智慧機器人 工研院 25 項技術串聯場域驗證與產業應用

整理/鄭宜芬 從 AI、智慧機器人到無人載具,工研院串聯研發法人及新創團隊,集結

鄧白氏揭中小企業 AI 轉型趨勢 從工具導入邁向營運與決策

採訪/鄭宜芬 美商鄧白氏(Dun & Bradstreet)公布第十三屆

AI 推動 6G 進化 企業下一代網路架構提前布局

整理/鄭宜芬 因應全球 6G 布局,數位發展部今(10)日舉辦「頻譜政策領航:邁

文章分類

  • 產業速報
  • 專欄
  • 影音
  • 風雲人物
  • CXO分享
  • 產業瞭望
  • 原生現場
  • 精選文章
  • 趨勢分析
  • 供應商視野
  • 新聞速寫
  • 下載
  • Sponsors

熱門標籤

  • 最新文章
  • 雲端運算
  • 人工智慧
  • 數位轉型
  • 製造業
  • 物聯網
  • 資料與分析
  • 資安
  • 區塊鏈
  • 5G
  • 儲存
  • 基礎架構

活動

  • CIO價值學院 四堂課
  • 智慧醫療研討會 台北/高雄場
  • 金融科技高峰會 春季/秋季場
  • 製造業CIO論壇 台北/台中/高雄場
  • 商業服務科技論壇
  • 亞太CIO論壇
  • CISO資安學院 金融/醫療/新竹場
  • CIO Insight 調查

影音

  • 影音