• 登入
  • 註冊網站會員
CIO Taiwan
  • 活動
  • 影音
  • 趨勢分析
  • CIO 雜誌
  • CISO精選
  • 電子報
  • 下載
  • 聯繫我們
沒有結果
查看所有結果
CIO Taiwan
沒有結果
查看所有結果
首頁 產業速報

忽略邊緣算力,AI 代理的成本會吃掉預算

2026-06-05
分類 : 產業速報
0
A A
0
忽略邊緣算力,AI 代理的成本會吃掉預算

◤ 高通總裁暨執行長 Cristiano Amon

從高通(Qualcomm)總裁暨執行長 Cristiano Amon 在 Computex 2026 開幕主題演講,看 AI 代理工作負載的基礎架構意涵。

編撰/何信達


企業裡的筆電和公務手機,都是為人類操作而設計的。這個前提,正在被打破。

 

內容目錄 隱藏
現有裝置從未為 AI 代理設計
在同一台裝置同時跑兩套邏輯
AI 代理讓詞元消耗跳升百倍,成本邏輯全面改寫
搞懂分散式詞元路由,進行雲端與邊緣協作才能控制成本
轉換點仍早,但採購邏輯需提前調整

現有裝置從未為 AI 代理設計

高通(Qualcomm)總裁暨執行長 Cristiano Amon 在 Computex 2026 開幕主題演講中定下了整場的基調:「今天所有的裝置,都是為由使用者發起動作而建造的——不是由 AI 代理。」這是工程現實的陳述,也是裝置升級週期的起點:當 Agentic AI(代理型 AI) 從早期採用者的實驗工具,演變成企業日常工作負載的執行層,現有裝置硬體將面臨根本性的重新設計。

Amon 今年連續第三年擔任 Computex 開幕主講者。他在演講開頭明確說明,當天的目標不是宣布新產品,而是讓所有人理解「AI 如何讓所有裝置進行演化」。

在同一台裝置同時跑兩套邏輯

現有裝置的設計邏輯,建立在一個假設上:是人在操作機器。應用程式等待指令,作業系統回應點擊,工作流程由人啟動、由人推進。AI 代理打破的正是這個假設——它持續運行、攜帶上下文向前推進、跨系統協調多個任務,且不需要每個步驟都有人介入。

Amon 在演講中把這種狀態稱為「two personalities」(雙主體操作):使用者以人的節奏操作裝置,AI 代理則以機器的速度在同一台裝置上自主運行。他強調,手機市場將率先完成這個轉變,再成為 PC 與其他個人運算裝置的參照。

[ 加入 CIO Taiwan 官方 LINE 、 Facebook 與 LinkedIn,與全球CIO同步獲取精華見解 ]

裝置硬體的設計要求隨之改變。AI 代理在背景持續運行,意味著功耗預算要重算:手機在人操作的情況下維持全天續航已屬不易,當 AI 代理同時在跑,是完全不同等級的工程挑戰。

支撐 AI 代理所需的硬體條件,Amon 列出了三項:

  1. 用於任務協調的強效低功耗 CPU、
  2. 用於執行本地模型的高效能 NPU 與 GPU、
  3. 提供即時上下文的感測器資料。

這三項條件,決定了下一代裝置能在本地消化多少 AI 代理工作負載,也直接影響企業對雲端算力的依賴程度與成本結構。

AI 代理讓詞元消耗跳升百倍,成本邏輯全面改寫

要理解 AI 代理對基礎架構成本的衝擊,需要先理解詞元(token)的消耗邏輯。詞元是語言模型處理文字的基本計算單位,也是雲端推論服務計費的依據,可以視為 AI 的計量貨幣。

從對話到自主任務執行,詞元消耗量分三個層級,以十倍增幅跳躍:

  • 第一級,單輪對話——使用者輸入提示、取得回應——約一萬詞元;
  • 第二級,多輪推理——AI 與使用者來回對話直到任務完成——升至約十萬詞元,增幅十倍;
  • 第三級,AI 代理自主執行——跨系統多步驟任務——達到百萬詞元量級,再增幅十倍。

換算到全球規模:2026 年每十秒的詞元需求估計為 317 億,2030 年每十秒的詞元需求預計達到 1.27 兆,約 40 倍的增長。推動這個增長的,是 AI 代理的運作方式——以機器速度與軟體互動、同時跨多個服務並行執行,每個工作流程產生的詞元量遠超人類直接操作的情境。

對企業 IT 規劃者而言,這指向容量與成本的重新估算。今天的雲端 AI 使用量,是以對話和推理任務為基準設計的。當組織內部的 AI 代理工作負載開始規模化,全部倚賴雲端處理的成本曲線,會比大多數預算規劃假設的更陡峭。

搞懂分散式詞元路由,進行雲端與邊緣協作才能控制成本

詞元需求的量級增長,讓雲端與邊緣運算如何分工這個問題有了可以計算的方法。

演講中用兩個實際運行的場景說明。第一個是程式碼生成任務——以 Claude Code 的真實工作階段為基準,由智慧型協調器(orchestrator,例如 OpenClaw、Hermes 這類的軟體)判斷哪些任務留在裝置本地運算、哪些送往雲端。結果是節省了約 140 萬詞元,同等產出的成本降低 60%;第二個場景是網頁生成任務,相同的分散式路由邏輯,產出相同結果,詞元用量減少 30%,成本降低四倍。

[ 推薦閱讀:黃仁勳演講,有哪些 Agentic AI 架構認知你需要更新? ]

這兩個數字對企業而言直接關鍵:同樣的產出,因為路由策略不同,成本可以差到四倍。演講中對這個分工邏輯的描述是——雲端處理該在雲端跑的,邊緣處理該在邊緣跑的,兩者是不同性質的工作。比較是今天每個人手機裡的兩百多個應用程式——沒有人會逐一分析哪個功能跑在本地、哪個跑在雲端,但把手機切成飛航模式,就知道雲端有多重要;而把所有運算都丟給雲端,本地算力又形同浪費。

對企業 IT 架構師而言,AI 代理工作負載的基礎架構設計,需要在兩個維度同時規劃:雲端推論的容量與成本,以及端點裝置的本地算力規格。而協調器軟體的路由智慧,決定了整個系統的詞元效率,也決定了 AI 代理規模化之後企業實際要付的帳單。

轉換點仍早,但採購邏輯需提前調整

Computex 2026 的這場演講,點出了採購邏輯正在改變。過去企業評估裝置,看的是處理器速度、記憶體容量、續航時間。這些指標仍然有效,但它們是為人類操作設計的基準。當 AI 代理開始在組織的端點裝置上規模化運行,評估框架需要加入新的維度:本地算力能承載多少 AI 代理工作負載、功耗設計能否支撐雙主體操作、裝置與雲端之間的協調機制是否存在。

這個轉換目前處於早期。演講中提到的 orchestrator 已在 Snapdragon 裝置上運行,但企業規模的部署仍在形成中。詞元需求從 2026 年到 2030 年的 40 倍增長預測,是估算而非板上釘釘,實際曲線取決於 AI 代理採用速度與模型效率的演進。

企業 IT 決策者現在要做的,是把這個框架放進基礎架構的中期規劃視野——在下一輪裝置更新週期評估時,把 AI 代理工作負載的承載能力列為規格條件之一。


(本文授權非營利轉載,請註明出處:CIO Taiwan)

Image 271
上一篇文章

AI 運算的下一個瓶頸:我們的數據正要撞上一道「銅牆鐵壁」?

下一篇文章

從 QFD 到 AI 品質屋:讓工程知識不再只停留在會議桌上

相關文章

SEMI 成立半導體材料聯盟 從供應韌性到協同開發加速材料量產落地
產業速報

SEMI 成立半導體材料聯盟 從供應韌性到協同開發加速材料量產落地

2026-08-24
AI 過不了 PoC 關卡? 資料治理成企業規模化落地關鍵
產業速報

AI 過不了 PoC 關卡? 資料治理成企業規模化落地關鍵

2026-08-24
全球首家 SEMI E187 資安檢測實驗室在臺啟用 半導體設備「進廠前」資安把關落地
產業速報

全球首家 SEMI E187 資安檢測實驗室在臺啟用 半導體設備「進廠前」資安把關落地

2026-08-20
下一篇文章

達梭系統運用虛擬雙生技術加速AI工廠創新

2026 Elite Vendor

追蹤我們的 Facebook

近期文章

  • SEMI 成立半導體材料聯盟 從供應韌性到協同開發加速材料量產落地
  • AI 過不了 PoC 關卡? 資料治理成企業規模化落地關鍵
  • 別再用公關報告漂綠!如何用 AI 與數據治理打破四十兆美元的 ESG 剛性約束?
  • 打通醫療數位轉型的任督二脈!如何讓你的健保病歷在不同醫院秒讀秒懂?
  • 全球首家 SEMI E187 資安檢測實驗室在臺啟用 半導體設備「進廠前」資安把關落地

📈 CIO點閱文章週排行

  • 【專訪】台達電子資訊長暨資安長曾立峰:企業架構思維,驅動全球營運

    【專訪】台達電子資訊長暨資安長曾立峰:企業架構思維,驅動全球營運

    0 分享
    分享 0 Tweet 0
  • 【專訪】中國信託商業銀行數位科技處處長王俊權:數據與 AI 治理體系,三層金字塔規模化

    0 分享
    分享 0 Tweet 0
  • AI 進入製造現場 臺灣加速布局智慧製造供應鏈

    0 分享
    分享 0 Tweet 0
  • FDE 前線部署工程師,讓 AI 真正落地的角色

    0 分享
    分享 0 Tweet 0
  • 金融業迎戰後量子資安 資策會倡「精準遷移」掌握轉型契機

    0 分享
    分享 0 Tweet 0
  • 避免盲追流行,「主權 AI」徹底剖析

    0 分享
    分享 0 Tweet 0
  • FHIR 開發者風險藍圖:TW Core

    0 分享
    分享 0 Tweet 0
  • 全球首家 SEMI E187 資安檢測實驗室在臺啟用 半導體設備「進廠前」資安把關落地

    0 分享
    分享 0 Tweet 0
  • 改變資料中心效能/功耗的最後一哩路:CPO 全面普及勢不可擋

    0 分享
    分享 0 Tweet 0
  • 2027 科技預算 1,823 億元創新高 主權 AI、算力基建為主軸

    0 分享
    分享 0 Tweet 0

數位及平面

  • CIO Taiwan 網站
  • CIO 雜誌紙本
  • CIO 雜誌 HYREAD 版
  • CIO 雜誌 Zinio 版

關注社群

  • Line 加入好友
  • Facebook 粉絲頁

合作夥伴

  • CIO 協進會

關於我們

  • 公司介紹及工作機會
  • 隱私權政策

旗訊科技股份有限公司|統編:84493719|台北市 100 中正區杭州南路一段 15-1 號 19 樓|TEL: 886-2-23214335
Copyright © Flag Information Co.,Ltd. All Rights Reserved.

CIO Taiwan 歡迎你回來!

可用 使用者名稱 或 Email 登入

忘記密碼 註冊

歡迎註冊 CIO Taiwan 網站會員

請設定 Email 及 使用者名稱(使用者名稱不接受中文、將來無法更改)

欄位皆為必填 登入

找回密碼

請輸入 使用者名稱 或 Email 以重設密碼

登入
  • 登入
  • 註冊
沒有結果
查看所有結果
  • 活動
  • 影音
  • 產業速報
  • 新聞速寫
  • 風雲人物
  • 產業瞭望
  • 專欄
  • 精選文章
  • 原生現場
  • 供應商視野
  • 線上調查
  • CIO 雜誌
  • 電子報
  • 下載
  • 聯繫我們

© 2020 CIO Taiwan 版權所有

7/28 活動延期通知

因高雄市政府於7/28早上宣布全日停班停課,因此「智慧醫療研討會高雄場」活動延期舉辦。主辦單位將另行公告研討會相關訊息,歡迎報名參加!

您已閒置超過 3 分鐘了,為您推薦其他文章!點擊空白處、ESC 鍵或關閉回到網頁

當 AI 開始自主行動 CISO 迎向治理新戰場

從 RSAC 看臺灣產業資安韌性布局當 AI 開始自主行動 CISO 迎向治理新

臺灣主權 AI 訓練語料庫 新增兩千萬 tokens 客語語料

整理/鄭宜芬 為厚植臺灣在地文化與語言的 AI 實力,數位發展部推動的「臺灣主權

【金融業】金融犯罪偵測系統的十年演進 ─ HSBC 反洗錢系統的 AI 路徑

從 2021 年的機器學習試驗,到 2026 年引入 代理式 AI,HSBC 的

【下載包】跨境資安風險升高 公務設備「出國前、期間、返國後」三階段防護

整理/鄭宜芬 公務人員出國執行公務時,手機、筆電等資通訊設備可能因使用公共網路、

全球競爭力重塑 數據與品牌驅動海外布局

文/鄭宜芬 全球供應鏈重組、AI 發展、地緣風險及永續要求持續改變國際競爭規則,

醫療 AI 進入規模化時代 應用創新邁向平台治理

人工智慧在醫療產業的發展應用 臺灣醫療 AI 已具備與國際競爭的實力,未來應持續

AI 算力競賽轉向系統整合 ASIC、HBM、矽光子成三大關鍵

整理/鄭宜芬 前沿AI模型訓練算力持續以每年4至5倍速度成長,能源供給、資料搬移

應對漂綠執法升級,嚴密數據血緣管理

隨著德國供應鏈法與歐盟碳關稅運作,漂綠執法已大幅升級,不實數據將招致法規處罰與撤

避開 主權 AI 行銷陷阱,從技術堆疊評估企業合規邊界

擁有自研模型可不等於達成主權 AI,AI 智慧層若依賴外國供應商的黑盒子,即便資

文章分類

  • 產業速報
  • 專欄
  • 影音
  • 風雲人物
  • CXO分享
  • 產業瞭望
  • 原生現場
  • 精選文章
  • 趨勢分析
  • 供應商視野
  • 新聞速寫
  • 下載
  • Sponsors

熱門標籤

  • 最新文章
  • 雲端運算
  • 人工智慧
  • 數位轉型
  • 製造業
  • 物聯網
  • 資料與分析
  • 資安
  • 區塊鏈
  • 5G
  • 儲存
  • 基礎架構

活動

  • CIO價值學院 四堂課
  • 智慧醫療研討會 台北/高雄場
  • 金融科技高峰會 春季/秋季場
  • 製造業CIO論壇 台北/台中/高雄場
  • 商業服務科技論壇
  • 亞太CIO論壇
  • CISO資安學院 金融/醫療/新竹場
  • CIO Insight 調查

影音

  • 影音