模擬人類反應式抓取過程，普渡大學團隊實現機器人學習的數據高效觸覺表征

高效的數據表征提高機器人觸覺學習性能

原標題：模擬人類反應式抓取過程，普渡大學團隊實現機器人學習的數據高效觸覺表征
文章來源：HyperAI超神經
內容字數：8527字

面向機器人學習的數據高效觸覺表征：LeTac-MPC和UniT

本文總結了普渡大學博士生徐政通在“新銳論前沿”第四期線上分享活動中，關于數據高效觸覺表征的科研成果LeTac-MPC和UniT的要點。

1. 觸覺感知與數據高效表征的重要性

在機器人自主學習中，觸覺感知至關重要，但傳統方法依賴海量數據，成本高昂且效率低下。因此，數據高效的觸覺表征成為研究焦點?；谧员O督學習、稀疏表示和跨模態感知的創新技術為解決這一問題提供了新的思路。 徐政通博士的研究成果正是致力于提升機器人觸覺學習性能，使其在有限數據下也能實現復雜任務的快速適應。

2. 可微分優化在機器人學習中的應用

可微分優化是機器人學習中的有力工具，尤其在軌跡規劃和人機交互方面。其核心思想是構建目標函數，并通過可微分的優化方法（例如二次規劃，QP）將其融入神經網絡，實現參數的梯度更新。這種方法能夠有效利用先驗知識，并結合數據驅動方法，提升模型的靈活性和適應性。

3. LeTac-MPC：基于觸覺信號的反應式抓取與模型控制

LeTac-MPC 是一種基于模型預測控制 (MPC) 的反應式抓取方法。它通過視覺觸覺傳感器（如GelSight）獲取觸覺信號，例如接觸面積和位移，并利用這些信息構建基于MPC的控制律。該方法模擬人類反應式抓取行為，根據物體反饋動態調整抓取力度，提升抓取的穩定性和適應性。

LeTac-MPC 的優勢在于：1. 具有良好的泛化能力，即使在有限數據下也能推廣到不同物體；2. 具有抗干擾性，能應對外界干擾；3. 具有高響應能力，能快速適應物體的動態變化。

4. UniT：用于機器人學習的統一觸覺表示

UniT 旨在通過單一簡單物體學習統一的觸覺表征。它利用VQGAN模型學習觸覺表征，并通過簡單的卷積層解碼潛在空間，連接到下游任務。實驗表明，UniT能夠有效地重建觸覺圖像，并優于其他方法，在6D姿態估計、3D姿態估計和分類任務中表現出色。更重要的是，在單一物體上訓練的表征可以泛化到其他未見物體，甚至超過了大量物體訓練的表征性能。 UniT 也在策略學習中展現了優越性，在Allen Key插入、芯片抓取和雞腿懸掛等復雜任務中取得了最佳效果。

5. 總結

LeTac-MPC 和 UniT 代表了數據高效觸覺表征領域的重要進展，為機器人感知與學習打開新的大門。它們不僅提升了機器人在復雜任務中的適應能力，也增強了其與人類和環境交互的能力，為未來機器人技術的發展提供了新的方向。

聯系作者

文章來源：HyperAI超神經
作者微信：
作者簡介：解構技術先進性與普適性，報道更前沿的 AIforScience 案例