Sora出圈，背后DiT也火了！作者NYU謝賽寧官宣全新升級版SiT

AIGC動態(tài)歡迎閱讀

原標(biāo)題：Sora出圈，背后DiT也火了！作者NYU謝賽寧官宣全新升級版SiT
關(guān)鍵字：模型,方法,時間,系數(shù),團隊
文章來源：新智元
內(nèi)容字?jǐn)?shù)：5071字

內(nèi)容摘要：

新智元報道編輯：好困
【新智元導(dǎo)讀】擴散Transformer（DiT）重磅升級——可擴展插值Transformer（SiT）！雖然核心架構(gòu)沒變，但在質(zhì)量、處理速度和使用靈活性方面都實現(xiàn)了顯著提升。最近，OpenAI的視頻生成模型Sora實火。
根據(jù)紐約大學(xué)計算機系助理教授謝賽寧的分析，Sora是基于自己和William Peebles共同提出的DiT框架設(shè)計而成。論文被ICCV 2023接收。
隨后，William Peebles加入了OpenAI，領(lǐng)導(dǎo)了開發(fā)Sora的技術(shù)團隊。
論文地址：https://arxiv.org/abs/2212.09748
與此同時，隨著大家對DiT的關(guān)注越來越高，謝賽寧團隊還官宣了重磅升級之后的SiT架構(gòu)——Scalable Interpolant Transformer，即可擴展插值Tranformer。
雖然基于相同的骨干，但SiT實現(xiàn)了更好的質(zhì)量、速度和靈活性。
對此，謝賽寧表示，SiT突破了傳統(tǒng)擴散技術(shù)的限制，從而可以利用插值法開拓更加廣泛的設(shè)計領(lǐng)域！
論文地址：https://arxiv.org/abs/2401.08740
可擴展插值T

原文鏈接：Sora出圈，背后DiT也火了！作者NYU謝賽寧官宣全新升級版SiT

聯(lián)系作者

文章來源：新智元
作者微信：AI_era
作者簡介：智能+中國主平臺，致力于推動中國從互聯(lián)網(wǎng)+邁向智能+新紀(jì)元。重點關(guān)注人工智能、機器人等前沿領(lǐng)域發(fā)展，關(guān)注人機融合、人工智能和機器人對人類社會與文明進化的影響，領(lǐng)航中國新智能時代。