使用預測,感測器必須決定接下來要觀察什麼。
當機器人安裝的攝影機必須推理遮蔽、運動或下一個視點時,世界模型組件最有用。與大型預測模型相比,固定靜態測量儀可以從更好的光學元件、校準和夾具中獲得更多收益。
研究
以證據為主導的指南,介紹度量 3D 重建、主動視圖規劃和不確定性如何將世界模型與可追溯的工業視覺計量連接起來。
要點
工業計量的生產就緒世界模型不應直接從產生的影片估計尺寸。在將測量值與 CAD 或公差極限進行比較之前,它應結合校準的度量 3D 幾何、動作條件狀態預測、主動視點規劃和不確定性傳播。
本文採機器輔助翻譯,尚未經真人語言審閱。技術條件仍須依實際樣品與來源資料確認。 英文原文
當機器人安裝的攝影機必須推理遮蔽、運動或下一個視點時,世界模型組件最有用。與大型預測模型相比,固定靜態測量儀可以從更好的光學元件、校準和夾具中獲得更多收益。
即使局部物理尺度、表面位置或相機姿態錯誤,模型也可以產生令人信服的點雲。工業視覺計量仍然需要物理參考製品、重複性研究以及最終報告尺寸的測量不確定度預算。
發送 CAD、公差、感測器和機器人約束、代表性表面和所需的循環時間。原型應說明哪些區域是不確定的、允許哪些相機動作以及如何衡量改進。
使用未參與模型設定或訓練的獨立工業驗證零件,對幾何重建進行基準測試。用經校正的標準器核對尺度,在不同位姿和表面條件下重複同一量測,並將校正、位姿、配準與模型的不確定度傳播到最終報告的尺寸。評估主動視角策略時,應看它減少了多少不確定度,而不是算繪畫面看起來有多完整。
工業計量世界模型結合了三個層次。第一個是幾何感知:深度、相機姿態、點圖以及從 RGB、RGB-D 或多視圖進行物理縮放的 3D 重建。第二個是以動作為條件的世界模型:它預測機器人或相機動作後可見度、運動或幾何形狀如何變化。第三是工業計量,包括校準、測量基準、公差、重複性、不確定性和可追溯性。如果省略任何一層,則可以合法地對系統所做的聲明就會改變。
可信的工業架構從已校正的相機、立體視覺、結構光或雷射輪廓量測,以及已知的物理尺度開始。機器人位姿、參考標準器和 CAD 可約束重建。世界模型應在該實尺度狀態上推理,而非從外觀編造尺寸。最終輸出仍應是帶不確定度聲明的實測特徵或 CAD 偏差,而不是視覺上逼真的影片影格。
VGGT 和 MapAnything 可以根據靈活的視覺輸入來估計相機幾何形狀、深度、點圖和物理縮放幾何形狀。它們對於初始化、匹配視圖之間的相應圖像點以及快速覆蓋場景非常有用。這些功能無法證明拋光金屬、黑色表面、重複形狀或嚴格公差的生產測量精度。每個候選模型仍然需要工業基準、物理比例驗證以及傳統的幾何或校準後端。
嚴格意義上來說,世界模型可以預測攝影機或機器人指令的後果。 PointWorld 使用 RGB-D 觀察結果和機器人動作來預測 3D 場景運動。 TesserAct 預測未來的 RGB 影像、深度和表面法線。對於計量學來說,有用的問題不是下一張圖像看起來是否真實。問題是移動感測器是否會暴露隱藏的量測基準、減少相機姿態的模糊性或減少關鍵尺寸的不確定性。
2026 年 MVM-IOD 基準測試從半球上機器人控制的角度記錄了兩個背景下的九個工業物件。這將創建 18 個具有參考相機姿勢和點雲的場景。評估報告稱,這種設定超出了測試的前饋重建方法的輸入分佈,並且可能會降低相機姿態估計和點雲品質。因此,自然圖像基準測試的良好結果並未顯示適合工廠使用。
不確定性感知系統可以標記觀察不良的區域,模擬候選攝影機視點,並將感測器移動到預期最大程度減少不確定性的視圖。 Trust3R 具有相關性,因為它解決了前饋 3D 重建的證據不確定性,而不僅僅是啟發式置信度得分。在生產中,模型輸出仍必須與校準誤差、機器人位姿誤差、幾何配準殘差和重複測量的變化結合。
使用分階段的準備評估。當已經滿足公差時,一級使用校準的 3D 感測。第二級增加了對下一個攝影機視點的主動規劃,這可以改善剛性部件的覆蓋範圍。第三級在移動部件、可變形材料或組合體需要時添加了動作條件預測。只有在完整的測量鏈驗證了物理尺度、穩定的量測基準、可重複性的證據以及所報告的測量的記錄的不確定度預算之後,才聲明第四級。
三個有前途的研究方向與工業測量具有明顯的相關性:不確定性感知的主動 3D 世界模型、用於反射或無紋理零件的 CAD 引導的物理縮放模型以及用於動態在線檢測的物理感知 4D 模型。每個都將校準的幾何形狀保持在中心位置。預測用於選擇攝影機視點、區分攝影機運動和物體運動或預測變形。它不用於繞過測量鏈。
| 比較項目 | 實務判斷 | 詢價時需要的資料 |
|---|---|---|
| 幾何基礎模型 | 根據視覺輸入估計相機姿態、深度、點圖或度量重建。 | 使用未參與訓練或調參的獨立工廠零件做基準評估,並以經校正的證據確定尺度後,再使用尺寸結果。 |
| 動作條件世界模型 | 預測相機或機器人動作後的未來場景狀態。 | 定義允許的操作、每個操作所需的時間以及該操作必須減少的不確定性或遮蔽。 |
| 神經渲染或 3DGS | 優化場景表現和新穎視角;視覺真實感本身並不能保證表面精確度。 | 根據獨立的參考幾何體驗證幾何地標、表面和物理比例。 |
| 工業計量系統 | 報告校準尺寸或 CAD 偏差,並提供重複性和不確定性證據。 | 指定量測基準、公差、可追溯性、MSA 方法和可接受極限。 |
行動條件世界模型的操作定義以及預測、感知、控制策略和價值模型之間的邊界。
根據 RGB-D 觀察結果和低階機器人指令進行動作條件 3D 點流預測。
根據一幅或多幅影像對攝影機、深度、點圖和軌跡進行前饋估計。
度量三維重建前端,可將影像與可選的相機內參、位姿、深度或部分幾何資訊一起使用。
對未來 RGB、深度和表面法線進行動作條件預測,以進行動態 4D 場景推理。
機器人控制的工業重建基準,具有參考姿勢和點雲,可揭示分佈外的故障模式。
工業多視圖配置結合了機器人運動、視圖規劃和複雜工件的點雲配準。
前饋 3D 重建的證據每點不確定性,而不是未校準的置信度得分。
常見問題
它是一個連接到校準的 3D 測量鏈的動作條件預測模型。它可以預測相機或機器人動作後場景、可見性或不確定性如何變化,而尺寸輸出仍然與真實尺度的幾何、基準和經過驗證的不確定性相關。
不,它們是幾何感知或重建模型。它們可以提供攝影機、深度、點圖或度量幾何,但完整的世界模型還可以預測以動作為條件的未來狀態。
它可以輔助初始化或重建,但直接使用尺寸仍須有獨立尺度、校正、重複性測試、工業場景驗證,以及與被測特徵關聯的不確定度預算。
主動視圖規劃選擇下一個相機姿勢,期望揭示被遮蔽的表面、穩定幾何配準或減少關鍵尺寸周圍的不確定性。它不僅僅遵循固定的掃描路徑。
不需要。具有受控呈現的固定剛性部件可能只需要合適的光學元件、校準的 3D 感測和穩定的夾具。當必須預測視點、運動、遮蔽或變化狀態時,世界模型會增加價值。
從校準的 3D 感測和 CAD 或參考幾何體開始。然後加入不確定性感知重建和下一個攝影機視點的規劃。僅當生產運動需要時才加入動作條件動態預測。
這些內容是內部編寫的選型示範,用於說明組件選擇與建議驗收條件,並非真實客戶專案、實測交付成果或客戶背書。示範中的圖片僅用於說明。