国产精品亚洲mnbav网站_成人午夜亚洲精品无码网站_日韩va亚洲va欧洲va国产_亚洲欧洲精品成人久久曰影片

HMA

AI工具9個(gè)月前更新 AI工具集
500 0 0

HMA – MIT聯(lián)合Meta等推出的機(jī)器人動(dòng)作視頻動(dòng)態(tài)建模方法

HMA是什么

HMA(Heterogeneous Masked Autoregression)是一種由麻省理工學(xué)院、Meta及伊利諾伊大學(xué)香檳分校共同開源的技術(shù),旨在建模機(jī)器人動(dòng)作視頻的動(dòng)態(tài)表現(xiàn)。該方法依托于異構(gòu)預(yù)訓(xùn)練,利用來自不同機(jī)器人實(shí)體、領(lǐng)域和任務(wù)的觀測(cè)和動(dòng)作序列,結(jié)合掩碼自回歸技術(shù),以實(shí)現(xiàn)視頻預(yù)測(cè)。HMA提供了離散和連續(xù)兩種變體,適用于快速生成和高保真度生成,能夠有效處理動(dòng)作空間的多樣性,包括不同的動(dòng)作頻率、維度和動(dòng)作類型,并通過模塊化網(wǎng)絡(luò)架構(gòu)實(shí)現(xiàn)實(shí)時(shí)高效交互。HMA在機(jī)器人學(xué)習(xí)領(lǐng)域展現(xiàn)了廣泛的應(yīng)用潛力,包括視頻模擬、策略評(píng)估、合成數(shù)據(jù)生成以及作為模仿策略的使用,尤其在擴(kuò)展性和實(shí)時(shí)性方面表現(xiàn)突出。

HMA

HMA的主要功能

  • 視頻模擬:生成高質(zhì)量的視頻序列,模擬機(jī)器人在不同環(huán)境中的效果,廣泛應(yīng)用于虛擬環(huán)境的交互和測(cè)試。
  • 策略評(píng)估:作為高保真模擬器,評(píng)估機(jī)器人策略的性能,預(yù)測(cè)其在真實(shí)環(huán)境中的表現(xiàn)。
  • 合成數(shù)據(jù)生成:生成大量合成數(shù)據(jù),增強(qiáng)機(jī)器人訓(xùn)練數(shù)據(jù)集,提升策略的泛化能力。
  • 模仿策略:作為模仿學(xué)習(xí)的策略,直接預(yù)測(cè)機(jī)器人在特定觀測(cè)下的動(dòng)作。

HMA的技術(shù)原理

  • 異構(gòu)預(yù)訓(xùn)練
    • 數(shù)據(jù)來源:通過大量來自不同機(jī)器人實(shí)體、任務(wù)與領(lǐng)域的觀測(cè)和動(dòng)作序列數(shù)據(jù)進(jìn)行預(yù)訓(xùn)練,涵蓋從簡(jiǎn)單到復(fù)雜的動(dòng)作空間。
    • 動(dòng)作異構(gòu)性處理:為每個(gè)領(lǐng)域設(shè)計(jì)特定的動(dòng)作編碼器和解碼器,將不同的動(dòng)作空間映射到共享的潛在空間,以處理動(dòng)作頻率、維度和動(dòng)作空間的異構(gòu)性。
    • 模塊化架構(gòu):網(wǎng)絡(luò)架構(gòu)由多個(gè)動(dòng)作輸入模塊(“stem”)、動(dòng)作輸出模塊(“head”)和共享的核心時(shí)空變換器(“trunk”)組成,支持高效的預(yù)訓(xùn)練和靈活擴(kuò)展。
  • 掩碼自回歸
    • 掩碼目標(biāo):在訓(xùn)練過程中,模型基于掩碼自編碼目標(biāo)隨機(jī)掩碼部分標(biāo)記,并根據(jù)未掩碼的標(biāo)記預(yù)測(cè)掩碼部分,以學(xué)習(xí)序列的聯(lián)合分布。
    • 自回歸生成:在推理時(shí),模型逐步取消掩碼,生成未來的視頻幀和動(dòng)作序列,從而實(shí)現(xiàn)高效且高質(zhì)量的生成。
    • 兩種變體:HMA支持離散變體(生成矢量量化標(biāo)記)和連續(xù)變體(生成軟標(biāo)記),分別適用于快速生成和高保真度生成。

HMA的項(xiàng)目地址

HMA的應(yīng)用場(chǎng)景

  • 實(shí)時(shí)視頻模擬:快速生成機(jī)器人在多種環(huán)境中的動(dòng)作視頻,應(yīng)用于虛擬交互測(cè)試,驗(yàn)證策略效果,減少實(shí)際部署成本。
  • 策略評(píng)估:作為高保真的模擬器,評(píng)估機(jī)器人策略性能,并預(yù)測(cè)其在真實(shí)環(huán)境中的表現(xiàn),以輔助策略優(yōu)化。
  • 合成數(shù)據(jù)生成:生成大量合成數(shù)據(jù),擴(kuò)充訓(xùn)練數(shù)據(jù)集,提升策略的泛化能力,尤其在數(shù)據(jù)稀缺情況下效果顯著。
  • 模仿學(xué)習(xí):直接作為模仿策略,依據(jù)當(dāng)前觀測(cè)預(yù)測(cè)機(jī)器人動(dòng)作,快速響應(yīng)環(huán)境變化,提高任務(wù)執(zhí)行效率。
  • 長(zhǎng)期規(guī)劃與控制:HMA支持生成長(zhǎng)序列的視頻和動(dòng)作預(yù)測(cè),助力機(jī)器人進(jìn)行長(zhǎng)期規(guī)劃和模型預(yù)測(cè)控制,提升復(fù)雜任務(wù)的完成率。
閱讀原文
? 版權(quán)聲明
蟬鏡AI數(shù)字人

相關(guān)文章

蟬鏡AI數(shù)字人

暫無評(píng)論

暫無評(píng)論...
国产精品亚洲mnbav网站_成人午夜亚洲精品无码网站_日韩va亚洲va欧洲va国产_亚洲欧洲精品成人久久曰影片
<span id="3dn8r"></span>
    1. <span id="3dn8r"><optgroup id="3dn8r"></optgroup></span><li id="3dn8r"><meter id="3dn8r"></meter></li>

        欧美日韩国产乱码电影| 美女视频免费一区| 亚洲成人av一区二区| 91免费观看在线| 亚洲日本韩国一区| 欧美性一级生活| 石原莉奈在线亚洲二区| 欧美精品一卡两卡| 久久福利资源站| 国产精品区一区二区三区| 99国产精品久久久久久久久久| 亚洲欧美国产高清| 日韩你懂的在线观看| 99在线视频精品| 日本欧美一区二区| 国产人妖乱国产精品人妖| 91麻豆成人久久精品二区三区| 日韩激情一区二区| 国产精品久久777777| 777久久久精品| www.在线欧美| 久久国产精品露脸对白| 亚洲欧美一区二区三区国产精品| 欧美一区二区黄色| 99久久国产综合色|国产精品| 日韩精品每日更新| 亚洲黄网站在线观看| 欧美国产精品一区二区三区| 欧美二区在线观看| 色综合中文字幕| 国产精品88av| 免费在线看一区| 亚洲一区二区综合| 亚洲日本中文字幕区| 久久这里只有精品视频网| 在线看国产一区| 国产91精品免费| 狠狠色综合日日| 日日夜夜精品视频免费| 一区二区三区欧美在线观看| 中文成人av在线| 久久精品视频免费| 精品国产区一区| 日韩美女一区二区三区四区| 在线免费精品视频| 色婷婷av一区二区三区gif| 成人一二三区视频| 成人激情文学综合网| 国产一区二区福利| 国产真实乱子伦精品视频| 美女网站一区二区| 蜜臀av一区二区在线免费观看| 亚洲1区2区3区4区| 图片区小说区国产精品视频| 天堂在线一区二区| 久久狠狠亚洲综合| 九九久久精品视频| 国产精品一区二区久久精品爱涩| 国模娜娜一区二区三区| 国产激情一区二区三区桃花岛亚洲| 精品一区二区在线免费观看| 美女任你摸久久| 激情综合网最新| 国产福利一区二区三区| 成人v精品蜜桃久久一区| 91视频精品在这里| 欧美色图在线观看| 91精品国产综合久久精品 | 日本不卡免费在线视频| 亚洲国产aⅴ成人精品无吗| 亚洲一区二区在线观看视频 | 亚洲国产综合色| 亚洲成人在线免费| 久久超碰97中文字幕| 国产成人免费视频| 色婷婷综合视频在线观看| 欧美另类变人与禽xxxxx| 日韩精品一区二区在线观看| 国产日韩精品一区| 亚洲乱码国产乱码精品精可以看| 亚洲va天堂va国产va久| 极品尤物av久久免费看| 波多野结衣一区二区三区 | 亚洲欧美日韩国产手机在线| 亚洲一区在线视频观看| 麻豆成人av在线| av不卡在线播放| 欧美日韩国产精品自在自线| 久久网这里都是精品| 一区二区三区在线观看网站| 麻豆91免费看| 欧美中文字幕一区二区三区 | 精品国产一区二区国模嫣然| 国产精品白丝在线| 青青草国产成人99久久| thepron国产精品| 日韩一区二区精品在线观看| 中文字幕不卡在线| 男女性色大片免费观看一区二区| 成人黄色电影在线| 日韩一区二区高清| 亚洲午夜激情网页| 99re视频精品| 国产亚洲综合色| 日本亚洲天堂网| 欧美日韩中文字幕精品| 国产三级精品三级| 免费黄网站欧美| 欧美性色欧美a在线播放| 国产精品午夜春色av| 国内精品不卡在线| 日韩精品一区二区三区中文精品| 亚洲国产成人av好男人在线观看| 成年人国产精品| 国产精品网站一区| 国精产品一区一区三区mba视频| 欧美日韩精品三区| 亚洲国产日韩a在线播放性色| av男人天堂一区| 国产精品成人一区二区艾草| 韩国精品主播一区二区在线观看| 欧美一区二区在线免费观看| 一区二区三区国产豹纹内裤在线| 91在线视频免费91| 亚洲人一二三区| 色伊人久久综合中文字幕| 亚洲国产精品高清| 成人免费视频视频在线观看免费 | 亚洲精品国产精华液| 成人晚上爱看视频| 国产精品污网站| 91啪九色porn原创视频在线观看| 中文字幕精品综合| bt欧美亚洲午夜电影天堂| 国产精品色一区二区三区| 高清日韩电视剧大全免费| 欧美—级在线免费片| 成人白浆超碰人人人人| 国产精品白丝在线| 色8久久精品久久久久久蜜| 亚洲色欲色欲www| 色综合咪咪久久| 亚洲不卡一区二区三区| 日韩一区二区三区观看| 黄一区二区三区| 国产精品污污网站在线观看| 99国产精品视频免费观看| 亚洲精品水蜜桃| 欧美午夜在线一二页| 天天免费综合色| 国产亚洲视频系列| 91老师国产黑色丝袜在线| 亚洲www啪成人一区二区麻豆| 日韩欧美一二三四区| 国产高清在线精品| 亚洲精品自拍动漫在线| 日韩一区二区三区电影| 成人午夜伦理影院| 亚洲成人av电影在线| 欧美sm美女调教| 成人午夜视频福利| 午夜电影网一区| 久久精品亚洲精品国产欧美| 95精品视频在线| 蜜桃一区二区三区在线| 国产精品青草综合久久久久99| 欧美综合一区二区| 国产一区二区三区国产| 亚洲美女少妇撒尿| 精品国产亚洲在线| 欧美最猛性xxxxx直播| 精品一区二区免费在线观看| 亚洲精品乱码久久久久久久久| 日韩一区二区三区免费看| 99国产精品国产精品久久| 蜜桃视频在线一区| 亚洲色图制服诱惑| 国产欧美日韩综合精品一区二区| 这里只有精品视频在线观看| 99精品视频在线观看| 国产精品一级在线| 日韩不卡一二三区| 亚洲国产色一区| 亚洲免费在线观看视频| 中文字幕免费不卡| 亚洲精品一区二区三区蜜桃下载| 欧美特级限制片免费在线观看| av成人动漫在线观看| 福利一区在线观看| 精品一区精品二区高清| 日韩中文字幕av电影| 一区二区欧美国产| 一区二区三区四区在线免费观看| 国产精品国产三级国产普通话蜜臀| 欧美精品一区二区久久婷婷| 91精品福利在线一区二区三区 | 日韩午夜精品电影| 欧美日韩一区二区三区视频| 色嗨嗨av一区二区三区| 91在线porny国产在线看|