午夜国产在线观看_69xx视频在线观看_五月久久六月婷婷俺也去_国产精品一区二区日韩新区_国产精品第一页爽爽影院_靠比视频免费观看

以往的通用模型如 RT-2、OpenVLA 雖已初具通用模型之勢，但依然存在諸多瓶頸：

UniVLA 選擇了一條更具前瞻性的路徑：不再直接預測每一步動作，而是構建一個任務中心的隱式動作空間，在這個“中間表征”上統一訓練與泛化策略，不僅可以有效解決上述瓶頸，同時也能夠以更低的計算資源消耗實現更優的效果。

UniVLA的核心創新在于構建了以任務為中心的隱式動作空間（task-centric latent action space），讓模型可以從海量無標簽視頻中學習任務相關且高效泛化的動作表示，只在人類視頻數據(Ego4D)上預訓練，就可以在LIBERO仿真平臺上達到SOTA級別效果。經過預訓練后同一模型可以同時完成操作與導航等任務，實現了通用的動作學習。

為什么是隱式動作？

因為它既“壓縮信息”，又“對齊知識”

傳統的通用模型如OpenVLA采用自回歸策略直接預測每一步動作，推理速度慢且魯棒性不強。UniVLA則另辟蹊徑，將動作預測劃分為三個階段：

1. 隱式動作學習：

從海量跨領域視頻中“默默學習”，通過逆動力學建模并使用VQ-VAE進行離散化，構建出對任務理解更強、更緊湊的隱式動作空間；

2. 通用策略預訓練：

借助Prismatic-7B等大模型架構，將視覺觀察與語言指令編碼為統一輸入，預測隱式動作序列，從而實現具身無關的通用策略；

3. 動作解碼與部署：

使用輕量化解碼器將隱式動作轉譯為真實機器人控制信號，作為下游的控制策略，從而能夠在多款機器人平臺上進行快速適配和部署，輕裝上陣、高效執行。

UniVLA的前兩階段訓練策略

相比 OpenVLA 那種直接在動作空間里“硬解”的做法，UniVLA 的“隱式編碼”（Latent Encoding）策略有幾個顯著優勢：

1. 可以更好的利用視頻數據，泛化范圍大：

只需視頻和語言，就能從互聯網視頻數據中學技能，提取動作；

2. 壓縮維度，降低計算成本：

動作空間被有效壓縮，推理速度從<5Hz 提升至 10Hz+；

3. 適配靈活，遷移效率高：

由于隱式動作具有通用性，故只需輕量微調，就能部署到不同機器人上，下游數據效率拉滿。

數據算力所需更少，性能反而更強

相比OpenVLA，UniVLA在計算效率和適配能力上表現出壓倒性優勢：預訓練GPU時長僅為其1/20，卻在多個任務和平臺上實現性能的全面超越。

在LIBERO、CALVIN等多個操控基準測試中，UniVLA展現出優越的通用性與任務適應能力，在四項評估指標中成功率平均提升達18.5%。更值得注意的是，僅使用人類視頻預訓練(Ego4D)，UniVLA也能在LIBERO-Goal中達到SOTA效果。同時只需要10%的數據就在LIBERO-Goal上達到了SOTA效果（62.4%），優于同樣數據量訓練下的OpenVLA（11.6%）和 OpenVLA-OFT（43.0%），數據利用效率如同開掛。

LIBERO 實驗結果

更重要的是，UniVLA以其結構化的隱式動作空間設計，天然具備擴展性與數據可擴展性：無論是引入更多人類示范作為提取隱空間表征的與訓練，還是增加新的機器人平臺僅通過輕量微調即可遷移適配，實現跨具身、跨視角、跨任務的全面通用。

在真實機器部署中，受益于僅12M參數的簡單動作解碼器以及高效的隱空間動作表征，UniVLA可以實現（閉環）10Hz以上的實時推理控制，在多個任務中（如“清理案板”、“疊漢諾塔”等）展現出高精度、高魯棒的操作能力，平均成功率達到80%+，推理時延遠低于OpenVLA，打通了通用大模型到落地應用的可能路徑。

UniVLA在真機實驗表現出色

同時在設計的若干泛化實驗中，面對各種泛化挑戰，它不僅不社恐，還能“快準穩”上手。通用的隱式動作空間+異構數據的預訓練，讓它不止是“聰明”，而且真“通用”。

UniVLA在不同泛化條件下的表現

多虧了UniVLA的‘隱式動作+通用訓練’，UniVLA能夠充分在大量異構數據(操作、導航甚至人類視頻)中進行學習，并能夠有效容納足夠多的知識，照單全收，越學越強。

UniVLA的異構數據擴展能力

少樣本情況下UniVLA性能優勢盡顯，在LIBERO長程任務基準上僅用10%數據（不到50條demo，平均每個任務僅5條）擊敗了全量數據微調的OpenVLA。

UniVLA在少樣本情況下的表現

UniVLA的方法不僅代表了視覺語言動作模型（VLA）領域的一次突破，更為“通用機器人智能”提供了新的思考與貢獻：從像素重建走向語義解耦的隱式動作學習、從高耗能預訓練走向輕量高效的跨本體適配、從單一機器人數據閉環走向人類視頻與多本體數據的開放協同。