定義: 物理 AI 是一類將人工智慧(AI)與能感知並在實體世界中採取行動的硬體相結合的應用,使機器能夠即時感知周遭環境、進行推理、採取行動並適應環境。
運作原理: 物理 AI 系統持續執行「感知-推理-行動-學習」的循環,整合多模態感測器資料,在專用的邊緣晶片上執行 AI 推論,並驅動致動器——這些系統主要透過模擬生成的合成資料進行訓練。
核心挑戰:模擬與現實之間的差距——即模型在模擬環境與真實世界中的行為差異——是與可靠性、能源效率、延遲及安全性並列的跨領域障礙。
應用領域:汽車產業(先進駕駛輔助系統與自動駕駛)、機器人技術、航太產業(無人機)、醫療保健及製造業——凡是機器必須在無需人類介入的情況下,根據真實世界中不斷變化的狀況採取行動的場合。
其背後的工程技術: 物理 AI 的建構涵蓋了從晶片到系統 所提供的高保真多物理場 模擬技術,用於訓練與驗證模型;以及透過硬體與軟體協作協同設計 設計出的節能矽晶片,用以執行這些模型。 新思科技 並 Ansys 並提供涵蓋此範圍的模擬與矽晶片開發能力。
物理 AI 指的是將數位人工智慧(AI)工具與能感知並在實體世界中執行動作的硬體相連的應用。這種整合使機器能夠自主行動,並即時適應現實世界的情境。 過去,機器要麼執行一組預先定義的動作,要麼透過邏輯決策從一組可能選項中選擇動作。而由人工智慧驅動的實體系統則運用各種人工智慧演算法來解讀數據,並推導出超越簡單「如果-那麼-否則」演算法的行動方案。
生成式人工智慧的最新進展、機器學習的改進,以及針對「邊緣運算 」的實用解決方案,促使「物理 AI 」的應用日益廣泛。具備人工智慧能力的實體系統正逐漸應用於越來越多的領域,無需人類介入即可根據不斷變化的數據做出決策。
隨著這些系統逐漸應用於汽車、航太及醫療保健等產業的安全關鍵型應用,確保其可靠性與可預測性便變得至關重要。這也意味著在開發人工智慧模型的同時,必須採用穩健的驗證與確認方法。
自主系統在許多應用中運用物理 AI ,除了運用先進的人工智慧技術以及用於感測、運算和物理動作的最新硬體之外,還會透過蒐集、解讀、依據資訊採取行動,並從中學習。
為了支援這個生命週期,開發工作越來越依賴可擴展的模擬環境,讓工程師能在實際部署前,針對各種不同的條件測試系統的行為。
AI 模型
任何物理 AI 應用程式的基礎步驟,在於建構並訓練其人工智慧模型。為此,工程師首先需釐清哪些人工智慧技術最適合用於預測團隊正在自動化的實體系統的行為。這包括大型語言模型(LLMs)、小型語言模型,以及機器學習(ML)等較為傳統的人工智慧工具。
基礎模型是《物理 AI 》中最常見的模型類型。由於它們是基於物理數據進行訓練的,因此被稱為「世界基礎模型」(WFM)。由於這些神經網路是基於大型資料集進行訓練的,因此能夠處理廣泛的應用場景。
硬體
模型訓練完成後,下一步是組裝「物理 AI 」應用程式所需的硬體。這些硬體可分為四大類:訓練環境、感測器、運算資源,以及致動器與輸出裝置。
訓練環境
負責訓練 AI 模型的團隊會利用高效能運算(HPC)資料中心來建置和訓練這些模型。NVIDIA Omniverse 便是絕佳的範例,它是一組用於開發「物理 AI 」的函式庫與微服務集合,可在 AWS、Azure 或自建的運算基礎架構上,透過支援 GPU 的硬體運行。
這些環境通常會整合數位孿生 技術,用以建構現實世界系統的虛擬模型,從而實現更具可控性、可重複性及可擴展性的實驗。
感測器
連結實體世界與數位世界的輸入介面,是一組為人工智慧代理提供資訊的感測器。工程師使用「多模態感測」一詞,指從多個感測器擷取高保真度的數據。最常見的感測器類型包括:
感測類型 | 對象 | 環境 | 內部 | 地點 |
用法 | ● 判斷物體是否存在、其大小、位置及運動狀況 ● 提供足夠的感測器資料,以便透過標籤或推論來識別物件 | ● 測量環境的物理特性
| ● 測量物理 AI 硬體的物理特性
| ● 測量物理 AI 硬體的安裝位置 |
範例 | ● 攝影機 ● 紅外線攝影機 ● 照相機 ● 雷射測距系統 ● 雷達 ● 聲納 ● 超音波感測器 | ● 麥克風 ● 溫度感測器 ● 濕度感測器 ● 氣體偵測器 ● 壓力感測器 | ● 流量感測器 ● 加速度計 ● 陀螺儀 ● 力與扭力感測器 ● 編碼器 ● 觸覺感測器
| ● GPS ● 接近感測器 ● 即時定位系統(RTLS) |
運算資源
物理 AI 這些系統結合了遠端、本地及邊緣運算 資源,用於執行計算以解析感測器數據並做出決策。邊緣運算 除了能運用熱管理、多晶片封裝及電源管理方面的技術進展外,還能與其他硬體元件協同運作,以即時存取 AI 模型。
致動器與輸出
物理 AI 系統與現實世界的互動,是透過將指令轉換為動作的致動器,以及向人類及其他數位與實體系統提供資訊的輸出裝置來實現的。致動器和輸出裝置的常見例子包括:
● 馬達
● 線性致動器
● 末端執行器
● 液壓活塞
● 氣動活塞
● 泵浦
● 電磁閥
● 閥門
● 音圈
● 壓電致動器
● 顯示
● 講者
● 安全燈
● 藍牙、Wi-Fi 及其他通訊協定
製程
人工智慧模型與硬體整合於物理 AI 系統中,以執行其被指派的任務。業界將此流程分為四個步驟:
1. 感知
第一步是蒐集關於系統周圍物理世界的数据。系統內部或附近的各種感測器會產生數據集,物理 AI 系統會將這些數據集分解為有助於理解物理環境並據此做出決策的資訊。
2. 推理
在第二步中,上述提到的 AI 工具便發揮作用。AI 工作流程會運用這些資料集來解析當前狀況,進而決定如何應對。這已超越傳統機器控制系統的「如果-那麼-否則」邏輯,實現了即時決策。
3. 執行
在第三步中,AI 工作流程會根據推理步驟中產生的建議,為致動器生成指令。這些動作亦可傳送至輸出裝置,例如揚聲器和顯示器。
4. 進行「
」學習
第四個步驟會將「執行」步驟的結果整合至 AI 模型中,以提升系統的效能。此步驟屬可選項目,可於資料中心或實驗室遠端執行。學習步驟亦可於裝置本地端進行,此情況下即稱為「具身 AI」。
要更深入了解人工智慧驅動的應用程式如何應用這些步驟,一個好方法是觀察一個簡單的例子,例如一隻機械手臂從托盤上取下六種不同類型的甜甜圈,並將每種各放一個到盒子裡。在此情境中:
實際上,在廣泛的真實世界情境中驗證這些步驟的每一個環節至關重要,因為物理 AI 系統必須在各種無法透過實體測試全面驗證的條件下,仍能可靠地運作。
感測器技術、GPU 驅動的高效能運算、數位孿生 環境以及人工智慧工具等領域的突破,大幅拓展了物理 AI 的應用範圍。這些進展也使得系統在部署至真實環境之前,能透過模擬進行更早期的測試與驗證。直到最近為止,該技術主要應用於工業機器人及尖端自駕車的電腦視覺領域;如今,它正逐漸應用於航太、能源、醫療保健及消費性產品等產業的實際應用中。
以下是其中幾項較為令人興奮的應用:
儘管物理 AI 已從研發階段邁向實際應用,這項技術仍面臨一些重大挑戰。研究人員與工程師正以日益加快的步伐開發新技術與新製程,以滿足產業日益增長的需求。
一個根本性的跨領域挑戰在於「模擬與現實之間的落差」,即在模擬環境中經過訓練或驗證的系統,一旦置於真實世界環境中,其行為可能會有所不同。
最常見的處理難題包括:
如前所述,大多數物理 AI 的實作皆仰賴合成資料的產生來訓練其基礎模型。其中大部分資料是透過基於物理的模擬模型所產生。此外,在設計用於實現物理 AI 的電子與機械系統時,模擬也扮演著至關重要的角色。
高保真、基於物理的模擬對於提升合成數據的真實感,以及在開發和測試過程中更準確地呈現真實世界的系統行為至關重要。
基於物理的模擬訓練
訓練物理 AI 模型(尤其是世界基礎模型)需要龐大且多樣化的資料集,因此也需要一個強大且多樣化的模擬環境。此類環境的一個良好範例是 新思科技 多物理場 模擬工具集,其涵蓋範圍遍及從晶片到系統 。執行器的性能可透過以下工具進行建模:Ansys (專為多物理場 模擬設計的Motor-CAD電動機設計工具)、Ansys (Maxwell先進電磁場求解器)、Ansys (機械結構有限元素分析軟體),以及Ansys (多體動力學模擬軟體)。 工程團隊使用諸如Ansys Zemax OpticStudio光學系統設計與分析軟體,以及Ansys Lumerical INTERCONNECT光子學積體電路設計 與模擬軟體,來設計複雜的光學感測器;Ansys HFSS高頻電磁模擬軟體用於雷達;以及Ansys AVxcelerate Sensors自動駕駛車輛感測器模擬軟體用於光達(LiDAR),該軟體採用業界領先的Ansys SPEOSCAD 整合式光學與照明模擬軟體。
此方法有助於擴大情境涵蓋範圍,並讓工程師能在實際部署前,評估系統在各種運作條件下的行為表現。
工程師必須先建立精確且具彈性的模型,然後透過通用場景描述(USD)等標準格式,將這些模型導入NVIDIA Omniverse等環境中。
在建立世界基礎模型時,工程師會直接使用參數化物理模型,並搭配諸如Ansys ModelCenter這類基於模型的系統工程(MBSE)工具、 Ansys Twin Builder這類基於模擬的數位孿生 環境,或是數位孿生 平台,以及Ansys TwinAI這類由人工智慧驅動的數位孿生 軟體。此外,工程師亦可使用Ansys optiSLang流程整合與設計優化軟體等優化工具,為上述工具建立降階模型。
運用模擬技術推動物理 AI 硬體的設計
在協助工程師設計用於實現「物理 AI 」所需的感測器、電腦、致動器及輸出裝置方面,模擬同樣扮演著至關重要的角色。電機工程師在晶片設計上高度依賴模擬技術,特別是針對現代 CPU 和 GPU 中使用的多晶片封裝。現代晶片設計流程將包含以下工具: 新思科技 Platform Architect新思科技 ZeBu ®EmPower,以及新思科技 SpyGlass Power,用以將探索 並評估功耗最佳化 中的 RTL 程式碼。隨後,該流程將把類似 新思科技 RedHawk-SC ,以進行數位電源完整性 驗收。
在電子系統層級,工程師將運用諸如Ansys 的 Icepak電子元件散熱模擬軟體,以及Ansys 的 Sherlock電子元件可靠性預測軟體等工具,針對晶片、電路板及外殼層級的封裝建模以評估其可靠性,並優化設計以滿足功耗、散熱及結構方面的要求。
工程師在設計與開發過程中,會使用與感測器運作原理相似的模型訓練工具。例如,結合 Ansys Maxwell 與 Ansys Motion 的組合,有助於配置精密的步進馬達及其在機械手臂上的應用;而Ansys 的 Fluent流體模擬軟體則能模擬閥門開闔時的流體流動。控制工程師會使用嵌入式軟體產品(例如Ansys 的 SCADE Suite模型導向開發環境),來設計執行物理 AI 系統所要求動作的演算法。 Ansys 隨後,SCADE 會自動產生符合安全認證的程式碼,該程式碼能自動滿足諸多安全標準,以符合交通運輸等安全關鍵系統的要求。
一個 Ansys 馬克思威爾(Maxwell)電動機模擬的範例
由於「物理 AI 」幾乎涵蓋了所有類型的硬體,且是基於模擬生成的合成數據進行訓練的,因此一套全面的多物理場 以及多尺度模擬工具集——例如由 新思科技所提供的,對於推動產業發展至關重要。
這些功能相互配合,可支援更具可擴展性且更全面的驗證工作流程,有助於在實際應用前提升對系統效能的信心。
打造可靠的物理 AI 涵蓋了模擬、矽片與系統工程等領域。 了解如何 新思科技 提供從晶片到系統 的工程解決方案,以打造可靠的物理 AI 系統。
延伸閱讀
何謂「模擬與現實的落差」?——工程師如何彌合模擬與現實之間的差距。
為何次世代 NPU 對物理 AI 至關重要——AI 加速器 架構必須如何演進。
《物理 AI 》的工程設計——為何基於物理的模擬至關重要。
從概念到流片:SiMa.ai 為物理 AI 實現零缺陷的 A0 矽片—— 一則關於協同設計 的量產案例研究。
從代幣到物理:神經形態運算將如何推動「物理 AI」——新興的低功耗邊緣架構。
簡單來說,何謂「物理 AI 」? 物理 AI 是指與硬體相連、能在實體世界中感知並採取行動的人工智慧。物理 AI 系統不僅僅是產生數位輸出,它還能感知周遭環境、決定該如何行動、透過馬達或其他致動器採取行動,並能從結果中學習。
物理 AI 與傳統機器人技術或自動化有何不同?傳統機器人與自動化系統遵循預先編程或基於規則的邏輯。物理 AI 則以人工智慧模型取代這種固定邏輯,這些模型能解析感測器數據並推斷應採取的行動,使系統能夠適應不斷變化且難以預測的現實世界狀況。
「物理 AI 」與「具身人工智慧(embodied AI)」是否相同?具身人工智慧是一種邊緣運算 (物理 AI )的形式,其重點在於裝置本身進行學習——也就是將「學習」步驟在本地執行,而非僅在資料中心進行。所有具身人工智慧都屬於邊緣運算(物理 AI ),但並非所有邊緣運算(物理 AI )都會在裝置上進行學習。
物理 AI 與 agentic AI 之間有何區別?agentic AI 能自主規劃並執行多步驟任務以達成目標。當其行動透過感測器和致動器與實體世界產生互動,而非僅停留在純數位層面時,便成為物理 AI 。
何謂「模擬與實境差距」? 所謂的 「模擬與實境差距」,是指人工智慧模型在模擬環境中的表現,與其在現實世界中實體硬體上的表現之間的差異。透過高保真模擬、合成資料及數位孿生來彌合此差距,是部署物理 AI 時面臨的核心挑戰。
物理 AI 需要哪些硬體? 物理 AI 結合了感測器(相機、光達、雷達等)、邊緣運算 —— 越來越多地採用專為高效裝置端推論而設計的 神經處理單元—— 以及將決策轉化為物理動作的致動器,所有這些都必須在嚴格的功耗、延遲和散熱限制內運作。
在「物理 AI 」中,模擬技術是如何被運用的?模擬技術扮演著雙重角色:一是產生物理上精確的合成數據以訓練模型,二是設計用於運行這些模型的感測器與矽晶片。高保真、基於物理原理的多物理場 模擬技術,不僅能提升訓練數據的真實性,還能於實體部署前驗證系統行為。
哪些產業採用物理 AI ?汽車產業(先進駕駛輔助系統與自動駕駛)、機器人與製造業、航太產業(無人機)、醫療保健產業(手術與監測機器人),以及物流產業(自主移動機器人)均屬最早採用者,隨著技術日趨成熟,其應用範圍正不斷擴大。