国产精品亚洲mnbav网站_成人午夜亚洲精品无码网站_日韩va亚洲va欧洲va国产_亚洲欧洲精品成人久久曰影片

Perception-as-Control

AI工具8個月前發布 AI工具集
893 0 0

Perception-as-Control – 阿里通義實驗室推出的圖像動畫框架

Perception-as-Control是什么

Perception-as-Control是阿里巴巴通義實驗室推出的一種先進圖像動畫框架,旨在根據用戶的需求實現對的精細控制。該框架通過構建3D感知表示,將相機和物體的轉化為直觀且一致的視覺效果,利用感知結果作為控制信號,支持多種與相關的視頻合成任務。Perception-as-Control采用基于U-Net架構的擴散模型,結合參考圖像的外觀信息與控制信號,生成可控的圖像動畫。此外,該框架實施了三階段訓練策略,以平衡相機與物體的控制,展現出卓越的表現。

Perception-as-Control

Perception-as-Control的主要功能

  • 細致的協同控制:實現相機與物體的協同控制,使用戶能夠以細致的方式調整動畫中的各個元素,從而精準地操控場景中的物體及相機視角的變化。
  • 多樣化的相關視頻合成任務:支持多種相關的視頻合成任務,包括圖像基礎的生成、視頻克隆、轉移及編輯。
    • 生成:根據用戶提供的參考圖像和2D軌跡生成動畫。
    • 克隆:復刻源視頻中的相機和物體。
    • 轉移:將源視頻中的局部遷移到參考圖像中不同位置和大小的對象上。
    • 編輯:用戶提供分割掩碼,編輯掩碼內的。
  • 3D感知表示:通過構建3D感知表示,將復雜的3D場景簡化為關鍵對象部分(以單位球表示)和世界包絡,實現直觀且一致的視覺效果。

Perception-as-Control的技術原理

  • 3D感知表示:將3D場景簡化為關鍵對象部分(以單位球表示)和世界包絡,利用3D點跟蹤和視覺里程計技術捕捉局部物體與全局相機。
  • 網絡架構:基于去噪U-Net架構,采用兩個輕量級編碼器分別編碼相機和物體的控制信號,避免RGB級別的干擾,并通過融合模塊合并編碼信號。
  • 參考圖像注入:ReferenceNet將參考圖像的外觀信息注入生成過程,確保生成的視頻保留參考圖像的特定外觀。
  • 三階段訓練策略
    • 第一階段:僅訓練相機編碼器,處理只包含相機的視頻剪輯。
    • 第二階段:引入物體編碼器和融合模塊,處理包含相機和物體的視頻剪輯。
    • 第三階段:基于稀疏單位球實現精細的物體控制,自適應確定每個渲染點的控制范圍。
  • 擴散模型:利用圖像擴散概率模型的基本原理,采用去噪U-Net架構生成視頻,優化目標為最小化預測噪聲與實際噪聲之間的差異,條件輸入包括參考圖像和控制信號。

Perception-as-Control的項目地址

Perception-as-Control的應用場景

  • 電影與視頻特效:生成具有特定的動畫場景,模仿現有視頻中的復雜,或將一個角色的轉移到另一個角色上。
  • 游戲開發:為游戲角色和物體創造自然且可控的動畫,提升游戲的沉浸感與動態效果。
  • 虛擬現實(VR)和增強現實(AR):在VR環境中生成實時動畫反饋,增強用戶的互動體驗;在AR應用中將虛擬物體動畫與現實場景相結合。
  • 廣告與營銷:生成引人注目的動態廣告和品牌推廣動畫,提升品牌形象和記憶點。
  • 教育與培訓:生成科學實驗動畫和技能培訓模擬動畫,幫助學生和學員更好地理解和掌握知識與技能。
閱讀原文
? 版權聲明
蟬鏡AI數字人

相關文章

蟬鏡AI數字人

暫無評論

暫無評論...
国产精品亚洲mnbav网站_成人午夜亚洲精品无码网站_日韩va亚洲va欧洲va国产_亚洲欧洲精品成人久久曰影片
<span id="3dn8r"></span>
    1. <span id="3dn8r"><optgroup id="3dn8r"></optgroup></span><li id="3dn8r"><meter id="3dn8r"></meter></li>

        欧美日韩夫妻久久| 国产精品一区二区在线播放| 亚洲成人精品影院| 色域天天综合网| 亚洲18色成人| 日韩三区在线观看| 国产一区二区中文字幕| 国产精品色在线| 欧美日韩久久不卡| 毛片av一区二区三区| 国产欧美综合在线观看第十页| 91一区二区三区在线观看| 亚洲高清久久久| 日韩欧美国产不卡| 成人小视频免费在线观看| 亚洲乱码国产乱码精品精小说 | 成人免费观看视频| 亚洲美腿欧美偷拍| 日韩一区二区三区精品视频| 国产在线精品一区二区| 亚洲欧美另类久久久精品| 日韩无一区二区| 一本大道av伊人久久综合| 国产精品影视在线观看| 水野朝阳av一区二区三区| 国产精品久久毛片a| 日韩午夜三级在线| 欧洲av在线精品| 国产盗摄精品一区二区三区在线| 亚洲国产精品麻豆| 国产精品萝li| 欧美不卡在线视频| 欧美亚洲国产怡红院影院| 国产精品亚洲а∨天堂免在线| 亚洲成人自拍一区| 综合激情网...| 久久久久国产精品人| 日韩一区二区免费高清| 欧美性一二三区| 成人免费视频视频在线观看免费| 蜜臀久久久99精品久久久久久| 亚洲免费av高清| 成人免费在线视频观看| 国产色产综合产在线视频| 日韩免费电影一区| 在线播放国产精品二区一二区四区 | 蜜桃一区二区三区四区| 夜夜精品视频一区二区| 国产欧美一区二区精品婷婷 | 三级久久三级久久久| 亚洲男帅同性gay1069| 日本一区二区视频在线| 欧美精品一区在线观看| 欧美一二三区精品| 欧美一区二区三区喷汁尤物| 欧美老女人在线| 欧美在线观看一二区| 欧美中文字幕一二三区视频| 欧美视频日韩视频在线观看| 欧美综合久久久| 欧美精品自拍偷拍动漫精品| 欧美日韩激情一区| 欧美日本视频在线| 制服丝袜亚洲网站| 日韩精品一区在线| 国产三级欧美三级日产三级99 | 色老汉一区二区三区| 色婷婷综合五月| 欧美性受xxxx黑人xyx| 精品1区2区3区| 欧美一二三四区在线| 精品久久人人做人人爰| www激情久久| 国产亚洲一区二区三区| 日韩美女精品在线| 亚洲一区二区三区中文字幕| 无码av免费一区二区三区试看| 免播放器亚洲一区| 国产麻豆一精品一av一免费 | 欧美一级一级性生活免费录像| 日韩一区二区三区视频在线| 国产亚洲精品久| 怡红院av一区二区三区| 久久国产精品99久久久久久老狼 | 亚洲午夜电影在线观看| 日本欧洲一区二区| 国产精品一区二区91| 在线一区二区三区做爰视频网站| 欧美一区二区三区影视| 中文无字幕一区二区三区| 一二三区精品福利视频| 国产一区二区在线观看视频| 91在线免费播放| 欧美xxx久久| 一区二区三区四区中文字幕| 麻豆91在线播放| 99re8在线精品视频免费播放| 欧美性猛交xxxx黑人交| 精品欧美久久久| 亚洲国产精品久久久男人的天堂| 韩国女主播成人在线| 欧美三级韩国三级日本一级| 欧美国产精品一区| 日本三级亚洲精品| 欧美午夜精品理论片a级按摩| 2020国产成人综合网| 一级做a爱片久久| 国产高清久久久| 日韩午夜av电影| 五月激情综合婷婷| 色屁屁一区二区| 中文字幕不卡的av| 激情成人综合网| 7777精品伊人久久久大香线蕉完整版 | 91色婷婷久久久久合中文| ww亚洲ww在线观看国产| 午夜精品福利一区二区三区av| 99久久免费视频.com| 亚洲国产精品激情在线观看| 国产老肥熟一区二区三区| 欧美一级免费观看| 日韩激情一区二区| 在线播放欧美女士性生活| 午夜天堂影视香蕉久久| 欧美写真视频网站| 亚洲香蕉伊在人在线观| 色欧美88888久久久久久影院| 中文字幕一区免费在线观看| 国产成人亚洲精品青草天美| 久久久久成人黄色影片| 国产乱码字幕精品高清av| 日韩欧美一级精品久久| 日本亚洲天堂网| 日韩欧美国产电影| 久久91精品国产91久久小草| 欧美精品一区二区三区视频| 国产美女精品在线| 国产精品久久影院| 色88888久久久久久影院野外| 一区二区三区高清| 欧美日韩国产小视频| 欧美aaaaaa午夜精品| 精品国产区一区| 成人黄色电影在线| 亚洲精品国产无天堂网2021| 欧美色偷偷大香| 奇米四色…亚洲| 久久精品亚洲麻豆av一区二区| 成人午夜看片网址| 一区二区三区在线免费视频| 在线精品视频小说1| 亚洲.国产.中文慕字在线| 日韩一级片网站| 成人美女在线视频| 曰韩精品一区二区| 欧美一级电影网站| 成人国产电影网| 婷婷国产v国产偷v亚洲高清| 久久精品一区二区三区四区| 一本到不卡免费一区二区| 青青国产91久久久久久| 国产精品视频一区二区三区不卡| 欧美性大战久久| 国产精品一区二区久久不卡| 亚洲一区中文日韩| 久久亚洲二区三区| 欧美三级日本三级少妇99| 国产伦精品一区二区三区免费迷| 亚洲日本va午夜在线影院| 欧美日韩成人一区二区| 国产91清纯白嫩初高中在线观看 | thepron国产精品| 男人的j进女人的j一区| 国产精品久久午夜夜伦鲁鲁| 欧美一区三区二区| 97se亚洲国产综合自在线不卡| 蜜臀av国产精品久久久久| 亚洲女同ⅹxx女同tv| 欧美不卡激情三级在线观看| 色哟哟一区二区| 国产91精品久久久久久久网曝门| 亚洲一区二区五区| 国产精品福利一区二区三区| 欧美不卡一区二区| 欧美丰满美乳xxx高潮www| 91无套直看片红桃| 国产精品911| 国产一区三区三区| 老汉av免费一区二区三区| 亚洲1区2区3区4区| 一区二区三区在线影院| 国产精品美女久久久久aⅴ | 国产日韩精品一区二区浪潮av| 制服.丝袜.亚洲.中文.综合| 色婷婷一区二区三区四区| 国产成人免费视频网站| 久久99最新地址| 久久99精品视频| 精品一区二区三区在线观看| 日韩va亚洲va欧美va久久|