国产精品亚洲mnbav网站_成人午夜亚洲精品无码网站_日韩va亚洲va欧洲va国产_亚洲欧洲精品成人久久曰影片

HMA

AI工具9個(gè)月前更新 AI工具集
500 0 0

HMA – MIT聯(lián)合Meta等推出的機(jī)器人動(dòng)作視頻動(dòng)態(tài)建模方法

HMA是什么

HMA(Heterogeneous Masked Autoregression)是一種由麻省理工學(xué)院、Meta及伊利諾伊大學(xué)香檳分校共同開源的技術(shù),旨在建模機(jī)器人動(dòng)作視頻的動(dòng)態(tài)表現(xiàn)。該方法依托于異構(gòu)預(yù)訓(xùn)練,利用來自不同機(jī)器人實(shí)體、領(lǐng)域和任務(wù)的觀測(cè)和動(dòng)作序列,結(jié)合掩碼自回歸技術(shù),以實(shí)現(xiàn)視頻預(yù)測(cè)。HMA提供了離散和連續(xù)兩種變體,適用于快速生成和高保真度生成,能夠有效處理動(dòng)作空間的多樣性,包括不同的動(dòng)作頻率、維度和動(dòng)作類型,并通過模塊化網(wǎng)絡(luò)架構(gòu)實(shí)現(xiàn)實(shí)時(shí)高效交互。HMA在機(jī)器人學(xué)習(xí)領(lǐng)域展現(xiàn)了廣泛的應(yīng)用潛力,包括視頻模擬、策略評(píng)估、合成數(shù)據(jù)生成以及作為模仿策略的使用,尤其在擴(kuò)展性和實(shí)時(shí)性方面表現(xiàn)突出。

HMA

HMA的主要功能

  • 視頻模擬:生成高質(zhì)量的視頻序列,模擬機(jī)器人在不同環(huán)境中的效果,廣泛應(yīng)用于虛擬環(huán)境的交互和測(cè)試。
  • 策略評(píng)估:作為高保真模擬器,評(píng)估機(jī)器人策略的性能,預(yù)測(cè)其在真實(shí)環(huán)境中的表現(xiàn)。
  • 合成數(shù)據(jù)生成:生成大量合成數(shù)據(jù),增強(qiáng)機(jī)器人訓(xùn)練數(shù)據(jù)集,提升策略的泛化能力。
  • 模仿策略:作為模仿學(xué)習(xí)的策略,直接預(yù)測(cè)機(jī)器人在特定觀測(cè)下的動(dòng)作。

HMA的技術(shù)原理

  • 異構(gòu)預(yù)訓(xùn)練
    • 數(shù)據(jù)來源:通過大量來自不同機(jī)器人實(shí)體、任務(wù)與領(lǐng)域的觀測(cè)和動(dòng)作序列數(shù)據(jù)進(jìn)行預(yù)訓(xùn)練,涵蓋從簡(jiǎn)單到復(fù)雜的動(dòng)作空間。
    • 動(dòng)作異構(gòu)性處理:為每個(gè)領(lǐng)域設(shè)計(jì)特定的動(dòng)作編碼器和解碼器,將不同的動(dòng)作空間映射到共享的潛在空間,以處理動(dòng)作頻率、維度和動(dòng)作空間的異構(gòu)性。
    • 模塊化架構(gòu):網(wǎng)絡(luò)架構(gòu)由多個(gè)動(dòng)作輸入模塊(“stem”)、動(dòng)作輸出模塊(“head”)和共享的核心時(shí)空變換器(“trunk”)組成,支持高效的預(yù)訓(xùn)練和靈活擴(kuò)展。
  • 掩碼自回歸
    • 掩碼目標(biāo):在訓(xùn)練過程中,模型基于掩碼自編碼目標(biāo)隨機(jī)掩碼部分標(biāo)記,并根據(jù)未掩碼的標(biāo)記預(yù)測(cè)掩碼部分,以學(xué)習(xí)序列的聯(lián)合分布。
    • 自回歸生成:在推理時(shí),模型逐步取消掩碼,生成未來的視頻幀和動(dòng)作序列,從而實(shí)現(xiàn)高效且高質(zhì)量的生成。
    • 兩種變體:HMA支持離散變體(生成矢量量化標(biāo)記)和連續(xù)變體(生成軟標(biāo)記),分別適用于快速生成和高保真度生成。

HMA的項(xiàng)目地址

HMA的應(yīng)用場(chǎng)景

  • 實(shí)時(shí)視頻模擬:快速生成機(jī)器人在多種環(huán)境中的動(dòng)作視頻,應(yīng)用于虛擬交互測(cè)試,驗(yàn)證策略效果,減少實(shí)際部署成本。
  • 策略評(píng)估:作為高保真的模擬器,評(píng)估機(jī)器人策略性能,并預(yù)測(cè)其在真實(shí)環(huán)境中的表現(xiàn),以輔助策略優(yōu)化。
  • 合成數(shù)據(jù)生成:生成大量合成數(shù)據(jù),擴(kuò)充訓(xùn)練數(shù)據(jù)集,提升策略的泛化能力,尤其在數(shù)據(jù)稀缺情況下效果顯著。
  • 模仿學(xué)習(xí):直接作為模仿策略,依據(jù)當(dāng)前觀測(cè)預(yù)測(cè)機(jī)器人動(dòng)作,快速響應(yīng)環(huán)境變化,提高任務(wù)執(zhí)行效率。
  • 長(zhǎng)期規(guī)劃與控制:HMA支持生成長(zhǎng)序列的視頻和動(dòng)作預(yù)測(cè),助力機(jī)器人進(jìn)行長(zhǎng)期規(guī)劃和模型預(yù)測(cè)控制,提升復(fù)雜任務(wù)的完成率。
閱讀原文
? 版權(quán)聲明
蟬鏡AI數(shù)字人

相關(guān)文章

蟬鏡AI數(shù)字人

暫無評(píng)論

暫無評(píng)論...
国产精品亚洲mnbav网站_成人午夜亚洲精品无码网站_日韩va亚洲va欧洲va国产_亚洲欧洲精品成人久久曰影片
<span id="3dn8r"></span>
    1. <span id="3dn8r"><optgroup id="3dn8r"></optgroup></span><li id="3dn8r"><meter id="3dn8r"></meter></li>

        91在线观看美女| 精品国产一区二区三区忘忧草 | 18成人在线观看| 国产精品一级片| 欧美激情在线看| 99久久精品国产导航| 成人毛片视频在线观看| 国产精品不卡视频| 欧美午夜视频网站| 免费成人在线观看| 337p日本欧洲亚洲大胆色噜噜| 久草中文综合在线| 欧美国产综合一区二区| 欧美这里有精品| 国产在线播放一区三区四| 久久色成人在线| 色婷婷精品大在线视频 | 亚洲一区二区三区四区五区黄| 色狠狠色狠狠综合| 蜜臀久久99精品久久久画质超高清 | 91黄色免费观看| 婷婷中文字幕一区三区| 久久久高清一区二区三区| 99久久精品免费看| 久久成人av少妇免费| 亚洲美女在线一区| 久久天堂av综合合色蜜桃网| 欧洲一区二区av| 国产成人综合亚洲网站| 亚洲一区二区三区四区在线免费观看 | 粉嫩av亚洲一区二区图片| 亚洲国产精品久久久久婷婷884| 欧美va亚洲va香蕉在线| 91在线观看免费视频| 麻豆精品在线看| 亚洲精品视频免费观看| 久久精品一区二区三区不卡| 欧美日韩一区三区四区| 成人a区在线观看| 蜜桃精品在线观看| 亚洲电影中文字幕在线观看| 国产日韩欧美在线一区| 日韩一区二区三区视频在线观看| 91亚洲精品久久久蜜桃| 懂色av中文字幕一区二区三区 | yourporn久久国产精品| 精品一区二区三区免费播放| 亚洲va国产va欧美va观看| 亚洲欧洲日韩在线| 久久精品亚洲精品国产欧美| 日韩视频一区二区| 欧美日韩aaa| 日本韩国欧美在线| 色综合天天综合网天天看片| 丁香激情综合五月| 国产精品正在播放| 激情都市一区二区| 久久国产精品99久久人人澡| 天天影视色香欲综合网老头| 亚洲综合免费观看高清完整版在线| 欧美激情在线免费观看| 国产区在线观看成人精品| 精品成人佐山爱一区二区| 欧美一区二区精品| 欧美一级黄色大片| 欧美成人精精品一区二区频| 欧美电影在哪看比较好| 91精品麻豆日日躁夜夜躁| 69精品人人人人| 欧美mv和日韩mv的网站| 久久精品亚洲精品国产欧美 | 久久亚洲私人国产精品va媚药| 日韩欧美亚洲一区二区| 欧美成人激情免费网| 久久久久久久久蜜桃| 中文字幕乱码日本亚洲一区二区| 欧美激情综合在线| 1000部国产精品成人观看| 亚洲精品久久7777| 丝袜亚洲另类欧美综合| 精品一区二区在线看| 成人一道本在线| 欧美亚洲尤物久久| 日韩美女主播在线视频一区二区三区| 久久av老司机精品网站导航| 国模娜娜一区二区三区| 懂色av一区二区夜夜嗨| 欧美视频中文字幕| 精品久久久久久综合日本欧美| 国产肉丝袜一区二区| 亚洲另类色综合网站| 午夜精品久久久久久久久| 青草国产精品久久久久久| 国模大尺度一区二区三区| 91首页免费视频| 精品日韩av一区二区| 国产精品传媒入口麻豆| 毛片一区二区三区| 日本韩国欧美三级| 精品国产乱子伦一区| 日韩美女视频19| 另类小说视频一区二区| 99久久综合精品| 欧美一级高清大全免费观看| 亚洲人成人一区二区在线观看 | 国模娜娜一区二区三区| 欧美在线看片a免费观看| 久久精品人人做人人爽97| 亚洲一区二区五区| 国产成人一区在线| 欧美日韩和欧美的一区二区| 中文幕一区二区三区久久蜜桃| 视频一区二区不卡| 在线一区二区三区做爰视频网站| 精品国产乱码久久久久久老虎| 欧美大片拔萝卜| 亚洲成av人片在线| 一本色道亚洲精品aⅴ| 国产女人18毛片水真多成人如厕 | 麻豆91精品视频| 欧美在线观看一二区| 国产精品精品国产色婷婷| 激情小说亚洲一区| 91麻豆精品国产综合久久久久久 | 成人免费在线观看入口| 经典一区二区三区| 欧美一激情一区二区三区| 亚洲乱码日产精品bd| av不卡一区二区三区| 欧美激情综合五月色丁香| 精久久久久久久久久久| 日韩精品综合一本久道在线视频| 亚洲成a人v欧美综合天堂下载 | 国产精品日产欧美久久久久| 国产成人亚洲精品狼色在线| 久久精品一区二区| 99视频一区二区| 一级精品视频在线观看宜春院 | 久久久亚洲国产美女国产盗摄 | 欧美精品亚洲一区二区在线播放| 亚洲成人免费视| 欧美一区二区在线视频| 麻豆国产精品一区二区三区 | 日韩精品一二三| 精品国产三级a在线观看| 寂寞少妇一区二区三区| 久久久精品国产免费观看同学| 国产在线播放一区三区四| 26uuu欧美| 亚洲国产一二三| 一本到不卡精品视频在线观看| 亚洲欧美区自拍先锋| 欧美亚洲一区二区三区四区| 亚洲成人在线观看视频| 蜜臀久久99精品久久久久宅男| 精品久久久久久亚洲综合网| 日本亚洲欧美天堂免费| 久久这里只精品最新地址| 国产精品亚洲第一区在线暖暖韩国| 精品久久久久一区| 国产另类ts人妖一区二区| 亚洲欧美日韩国产成人精品影院 | 欧美无人高清视频在线观看| 午夜欧美电影在线观看| 欧美日韩高清一区二区不卡| 亚洲国产综合91精品麻豆| 欧美午夜电影网| 国产一区中文字幕| 久久精品在线观看| 99国产精品久久久久久久久久久| 国产精品久久久久久久浪潮网站| 欧美日韩不卡在线| 激情六月婷婷久久| 国产精品久久久久7777按摩| 成人激情动漫在线观看| 欧美一区二区精品久久911| www.欧美日韩| 一区二区三区在线视频观看| 欧美亚洲一区二区在线观看| 日本欧美一区二区三区乱码| 1区2区3区国产精品| 欧美精品自拍偷拍| 国产在线国偷精品产拍免费yy| 国产精品麻豆欧美日韩ww| 精品国产成人在线影院| 97久久超碰国产精品电影| 亚洲福利视频三区| 2020日本不卡一区二区视频| 91精品国产入口| 成人小视频免费观看| 亚洲免费伊人电影| 91麻豆精品91久久久久久清纯| 91麻豆福利精品推荐| 蜜臀久久99精品久久久久宅男| 久久久精品日韩欧美| 欧美三级资源在线| 欧美日韩中文国产| 不卡在线视频中文字幕| 免费在线成人网| 免费成人av在线|