• 登入
  • 註冊網站會員
CIO Taiwan
  • 活動
  • 影音
  • 趨勢分析
  • CIO 雜誌
  • CISO精選
  • 電子報
  • 下載
  • 聯繫我們
沒有結果
查看所有結果
CIO Taiwan
沒有結果
查看所有結果
首頁 產業速報

忽略邊緣算力,AI 代理的成本會吃掉預算

2026-06-05
分類 : 產業速報
0
A A
0
忽略邊緣算力,AI 代理的成本會吃掉預算

◤ 高通總裁暨執行長 Cristiano Amon

從高通(Qualcomm)總裁暨執行長 Cristiano Amon 在 Computex 2026 開幕主題演講,看 AI 代理工作負載的基礎架構意涵。

編撰/何信達


企業裡的筆電和公務手機,都是為人類操作而設計的。這個前提,正在被打破。

 

內容目錄 隱藏
現有裝置從未為 AI 代理設計
在同一台裝置同時跑兩套邏輯
AI 代理讓詞元消耗跳升百倍,成本邏輯全面改寫
搞懂分散式詞元路由,進行雲端與邊緣協作才能控制成本
轉換點仍早,但採購邏輯需提前調整

現有裝置從未為 AI 代理設計

高通(Qualcomm)總裁暨執行長 Cristiano Amon 在 Computex 2026 開幕主題演講中定下了整場的基調:「今天所有的裝置,都是為由使用者發起動作而建造的——不是由 AI 代理。」這是工程現實的陳述,也是裝置升級週期的起點:當 Agentic AI(代理型 AI) 從早期採用者的實驗工具,演變成企業日常工作負載的執行層,現有裝置硬體將面臨根本性的重新設計。

Amon 今年連續第三年擔任 Computex 開幕主講者。他在演講開頭明確說明,當天的目標不是宣布新產品,而是讓所有人理解「AI 如何讓所有裝置進行演化」。

在同一台裝置同時跑兩套邏輯

現有裝置的設計邏輯,建立在一個假設上:是人在操作機器。應用程式等待指令,作業系統回應點擊,工作流程由人啟動、由人推進。AI 代理打破的正是這個假設——它持續運行、攜帶上下文向前推進、跨系統協調多個任務,且不需要每個步驟都有人介入。

Amon 在演講中把這種狀態稱為「two personalities」(雙主體操作):使用者以人的節奏操作裝置,AI 代理則以機器的速度在同一台裝置上自主運行。他強調,手機市場將率先完成這個轉變,再成為 PC 與其他個人運算裝置的參照。

[ 加入 CIO Taiwan 官方 LINE 、 Facebook 與 LinkedIn,與全球CIO同步獲取精華見解 ]

裝置硬體的設計要求隨之改變。AI 代理在背景持續運行,意味著功耗預算要重算:手機在人操作的情況下維持全天續航已屬不易,當 AI 代理同時在跑,是完全不同等級的工程挑戰。

支撐 AI 代理所需的硬體條件,Amon 列出了三項:

  1. 用於任務協調的強效低功耗 CPU、
  2. 用於執行本地模型的高效能 NPU 與 GPU、
  3. 提供即時上下文的感測器資料。

這三項條件,決定了下一代裝置能在本地消化多少 AI 代理工作負載,也直接影響企業對雲端算力的依賴程度與成本結構。

AI 代理讓詞元消耗跳升百倍,成本邏輯全面改寫

要理解 AI 代理對基礎架構成本的衝擊,需要先理解詞元(token)的消耗邏輯。詞元是語言模型處理文字的基本計算單位,也是雲端推論服務計費的依據,可以視為 AI 的計量貨幣。

從對話到自主任務執行,詞元消耗量分三個層級,以十倍增幅跳躍:

  • 第一級,單輪對話——使用者輸入提示、取得回應——約一萬詞元;
  • 第二級,多輪推理——AI 與使用者來回對話直到任務完成——升至約十萬詞元,增幅十倍;
  • 第三級,AI 代理自主執行——跨系統多步驟任務——達到百萬詞元量級,再增幅十倍。

換算到全球規模:2026 年每十秒的詞元需求估計為 317 億,2030 年每十秒的詞元需求預計達到 1.27 兆,約 40 倍的增長。推動這個增長的,是 AI 代理的運作方式——以機器速度與軟體互動、同時跨多個服務並行執行,每個工作流程產生的詞元量遠超人類直接操作的情境。

對企業 IT 規劃者而言,這指向容量與成本的重新估算。今天的雲端 AI 使用量,是以對話和推理任務為基準設計的。當組織內部的 AI 代理工作負載開始規模化,全部倚賴雲端處理的成本曲線,會比大多數預算規劃假設的更陡峭。

搞懂分散式詞元路由,進行雲端與邊緣協作才能控制成本

詞元需求的量級增長,讓雲端與邊緣運算如何分工這個問題有了可以計算的方法。

演講中用兩個實際運行的場景說明。第一個是程式碼生成任務——以 Claude Code 的真實工作階段為基準,由智慧型協調器(orchestrator,例如 OpenClaw、Hermes 這類的軟體)判斷哪些任務留在裝置本地運算、哪些送往雲端。結果是節省了約 140 萬詞元,同等產出的成本降低 60%;第二個場景是網頁生成任務,相同的分散式路由邏輯,產出相同結果,詞元用量減少 30%,成本降低四倍。

[ 推薦閱讀:黃仁勳演講,有哪些 Agentic AI 架構認知你需要更新? ]

這兩個數字對企業而言直接關鍵:同樣的產出,因為路由策略不同,成本可以差到四倍。演講中對這個分工邏輯的描述是——雲端處理該在雲端跑的,邊緣處理該在邊緣跑的,兩者是不同性質的工作。比較是今天每個人手機裡的兩百多個應用程式——沒有人會逐一分析哪個功能跑在本地、哪個跑在雲端,但把手機切成飛航模式,就知道雲端有多重要;而把所有運算都丟給雲端,本地算力又形同浪費。

對企業 IT 架構師而言,AI 代理工作負載的基礎架構設計,需要在兩個維度同時規劃:雲端推論的容量與成本,以及端點裝置的本地算力規格。而協調器軟體的路由智慧,決定了整個系統的詞元效率,也決定了 AI 代理規模化之後企業實際要付的帳單。

轉換點仍早,但採購邏輯需提前調整

Computex 2026 的這場演講,點出了採購邏輯正在改變。過去企業評估裝置,看的是處理器速度、記憶體容量、續航時間。這些指標仍然有效,但它們是為人類操作設計的基準。當 AI 代理開始在組織的端點裝置上規模化運行,評估框架需要加入新的維度:本地算力能承載多少 AI 代理工作負載、功耗設計能否支撐雙主體操作、裝置與雲端之間的協調機制是否存在。

這個轉換目前處於早期。演講中提到的 orchestrator 已在 Snapdragon 裝置上運行,但企業規模的部署仍在形成中。詞元需求從 2026 年到 2030 年的 40 倍增長預測,是估算而非板上釘釘,實際曲線取決於 AI 代理採用速度與模型效率的演進。

企業 IT 決策者現在要做的,是把這個框架放進基礎架構的中期規劃視野——在下一輪裝置更新週期評估時,把 AI 代理工作負載的承載能力列為規格條件之一。


(本文授權非營利轉載,請註明出處:CIO Taiwan)

Image 271
上一篇文章

AI 運算的下一個瓶頸:我們的數據正要撞上一道「銅牆鐵壁」?

下一篇文章

從 QFD 到 AI 品質屋:讓工程知識不再只停留在會議桌上

相關文章

臺灣資安威脅亞太第一、全球第四 AI 加速攻擊,應變須前移
產業速報

AI 結合 3D 醫療影像 衛福部推動元宇宙智慧醫療

2026-10-06
臺灣資安威脅亞太第一、全球第四 AI 加速攻擊,應變須前移
產業速報

臺灣資安威脅亞太第一、全球第四 AI 加速攻擊,應變須前移

2026-10-06
AI 對抗 AI 資安攻防升級 資安院布局 Agentic AI 強化威脅偵測
產業速報

AI 對抗 AI 資安攻防升級 資安院布局 Agentic AI 強化威脅偵測

2026-10-05
下一篇文章

達梭系統運用虛擬雙生技術加速AI工廠創新

2026 Elite Vendor

追蹤我們的 Facebook

近期文章

  • FHIR 風險評估及實作指引:海量資料與臨床決策支援的效能挑戰
  • AI 腦袋也會被偷?全新 ISO 27090 揭密最新資安大作戰!
  • 解析虛擬資產保管的四大隱形考驗
  • AI 結合 3D 醫療影像 衛福部推動元宇宙智慧醫療
  • 臺灣資安威脅亞太第一、全球第四 AI 加速攻擊,應變須前移

📈 CIO點閱文章週排行

  • 華碩智行推出全球首創具專利的「四合一熱顯像車在席裝置」,整合AI熱顯感知、車牌辨識、車在席偵測、影像錄影功能

    智慧停車場新標竿 華碩智行全球首創防災與尋車四合一新科技

    0 分享
    分享 0 Tweet 0
  • 碩維深耕半導體產業鏈 以 Data First 為核心 打造 AI 運算平台

    0 分享
    分享 0 Tweet 0
  • 用 AI 教練畫出工廠的價值流地圖 VSM 與永續價值流地圖 Sus-VSM

    0 分享
    分享 0 Tweet 0
  • 【專訪】台北富邦銀行執行副總經理暨數位金融總處長陳弘儒:全行 AI 能力,打造金融生態圈

    0 分享
    分享 0 Tweet 0
  • GitLab 最高 10 分重大漏洞已遭利用 資安署籲儘速更新強化資安防護

    0 分享
    分享 0 Tweet 0
  • AI 資安國際標準 ISO 27090 強化 AI 治理

    0 分享
    分享 0 Tweet 0
  • AI 資安疫情全球蔓延,機關與企業如何迎戰?

    0 分享
    分享 0 Tweet 0
  • 銀行接下虛擬資產保管這一棒

    0 分享
    分享 0 Tweet 0
  • AI 成功關鍵在整資料改流程

    0 分享
    分享 0 Tweet 0
  • AI 腦袋也會被偷?全新 ISO 27090 揭密最新資安大作戰!

    0 分享
    分享 0 Tweet 0

數位及平面

  • CIO Taiwan 網站
  • CIO 雜誌紙本
  • CIO 雜誌 HYREAD 版
  • CIO 雜誌 Zinio 版

關注社群

  • Line 加入好友
  • Facebook 粉絲頁

合作夥伴

  • CIO 協進會

關於我們

  • 公司介紹及工作機會
  • 隱私權政策

旗訊科技股份有限公司|統編:84493719|台北市 100 中正區杭州南路一段 15-1 號 19 樓|TEL: 886-2-23214335
Copyright © Flag Information Co.,Ltd. All Rights Reserved.

CIO Taiwan 歡迎你回來!

可用 使用者名稱 或 Email 登入

忘記密碼 註冊

歡迎註冊 CIO Taiwan 網站會員

請設定 Email 及 使用者名稱(使用者名稱不接受中文、將來無法更改)

欄位皆為必填 登入

找回密碼

請輸入 使用者名稱 或 Email 以重設密碼

登入
  • 登入
  • 註冊
沒有結果
查看所有結果
  • 活動
  • 影音
  • 產業速報
  • 新聞速寫
  • 風雲人物
  • 產業瞭望
  • 專欄
  • 精選文章
  • 原生現場
  • 供應商視野
  • 線上調查
  • CIO 雜誌
  • 電子報
  • 下載
  • 聯繫我們

© 2020 CIO Taiwan 版權所有

7/28 活動延期通知

因高雄市政府於7/28早上宣布全日停班停課,因此「智慧醫療研討會高雄場」活動延期舉辦。主辦單位將另行公告研討會相關訊息,歡迎報名參加!

您已閒置超過 3 分鐘了,為您推薦其他文章!點擊空白處、ESC 鍵或關閉回到網頁

XPU 如何成為 AI 運算新選項? 輝達聯發科合作解析

整理/鄭宜芬 NVIDIA 日前宣布投資聯發科 35 億美元,認購聯發科發行的海

FHIR 風險評估及實作指引:海量資料與臨床決策支援的效能挑戰

口述╱孫培然‧彙整校訂╱CIO 編輯室 前一篇談到 Native FHIR 與

AI 結合 3D 醫療影像 衛福部推動元宇宙智慧醫療

整理/鄭宜芬 衛生福利部 5 日舉行「2026 國產 AI 3D 醫療影像暨元宇

臺灣資安威脅亞太第一、全球第四 AI 加速攻擊,應變須前移

整理/鄭宜芬 臺灣面臨的資安威脅程度持續升高。微軟近期發布《Microsoft

【調查報告】ShinyHunters 大規模漏洞攻擊 WAF 防線外仍須確認修補

整理/鄭宜芬 Google Cloud 旗下 Mandiant 與 Google

【影】無人載具新國力 臺灣產業升級的新布局

整理/鄭宜芬 在地緣政治、供應鏈重組與人工智慧快速發展的交會下,臺灣如何把既有製

微軟 Humanist AI 行為準則:MAI 模型須受人類控制、不得抗拒中斷

Humanist AI Code of Conduct 指出基本前提:人類的重要

數位轉型打地基,AI 轉型展翅飛

每一次的企業轉型都是一場蛻變 企業轉型之路無盡頭,每一次轉型涵蓋躍進機會以外的意

1200x630i161d17

AI 落地成敗關鍵 FDE 角色日益吃重

深入企業流程、資料與組織現場 FDE 逐漸受到市場重視,然而如何進行仍透著模糊,

文章分類

  • 產業速報
  • 專欄
  • 影音
  • 風雲人物
  • CXO分享
  • 產業瞭望
  • 原生現場
  • 精選文章
  • 趨勢分析
  • 供應商視野
  • 新聞速寫
  • 下載
  • Sponsors

熱門標籤

  • 最新文章
  • 雲端運算
  • 人工智慧
  • 數位轉型
  • 製造業
  • 物聯網
  • 資料與分析
  • 資安
  • 區塊鏈
  • 5G
  • 儲存
  • 基礎架構

活動

  • CIO價值學院 四堂課
  • 智慧醫療研討會 台北/高雄場
  • 金融科技高峰會 春季/秋季場
  • 製造業CIO論壇 台北/台中/高雄場
  • 商業服務科技論壇
  • 亞太CIO論壇
  • CISO資安學院 金融/醫療/新竹場
  • CIO Insight 調查

影音

  • 影音