“3D視頻版Sora”來了!
AIGC動態(tài)歡迎閱讀
內容摘要:
40秒生成3D視頻,Stability AI開源首個視頻生視頻模型。
作者|香草
編輯|李水青
輸入單個物體視頻,就能獲取任意拍攝視角的全視圖3D動態(tài)視頻了!
智東西7月25日消息,昨日晚間,AI獨角獸Stability AI推出其首個視頻生視頻(video-to-video)模型Stable Video 4D(SV4D),該模型能夠將單個物體的視頻輸入,轉換為8個不同視角的多個新視頻,用戶可任意指定攝像機角度。
▲輸出全視圖視頻演示
目前,SV4D可以通過一次推理,在約40秒內生成8個視圖的各5幀視頻,整個4D優(yōu)化需要20-25分鐘。該模型已在Hugging Face上開源,適用于游戲開發(fā)、視頻編輯、虛擬現實(VR)等場景的應用,可免費用于研究、非商業(yè)用途。
SV4D技術論文也同步發(fā)表,研究團隊由Stability AI和東北大學學者組成,其中詳細解讀了該模型的框架結構、優(yōu)化策略、測評結果等。
▲SV4D論文
Stability AI從2019年成立起,就致力于研發(fā)文字、圖像、音頻、視頻等多個領域的開源模型,其在2022年躋身獨角獸行列。雖然從去年以來它就陷入尋求賣身、核心技術團隊離
原文鏈接:“3D視頻版Sora”來了!
聯系作者
文章來源:智東西
作者微信:
作者簡介:
? 版權聲明
文章版權歸作者所有,未經允許請勿轉載。
相關文章
暫無評論...