二次元狂喜!海螺發(fā)布2D動(dòng)畫專用視頻生成模型,日漫迪士尼插畫風(fēng)都支持
奇月 發(fā)自 凹非寺量子位 | 公眾號(hào) QbitAIMinMax海螺AI新模型,讓2D角色動(dòng)起來(lái)了!日漫、游戲、插畫等各種風(fēng)格的靜態(tài)人物,都可以絲滑地轉(zhuǎn)變成生動(dòng)的2D風(fēng)格視頻。量子位也馬上上手實(shí)測(cè)了一波——首先請(qǐng)出今年的頂流悟空先生,輸入下面的prompt(輸入時(shí)是英文,此處意譯):悟空在波濤洶涌的海面上準(zhǔn)備戰(zhàn)斗,金箍棒閃著金光,衣擺隨風(fēng)被吹動(dòng),氣氛緊張來(lái)看看海螺的生成效果:不得不說(shuō),還真有大片里面戰(zhàn)斗即將開(kāi)場(chǎng)的即視感了!隨后,我們以經(jīng)典動(dòng)漫《你的名字》的海報(bào)為例,輸入了以下prompt:男孩和女孩轉(zhuǎn)過(guò)身面對(duì)對(duì)方,表情很觸動(dòng),眼中含有淚水,逐漸靠近并最終擁抱在一起。最終的生成效果真的很贊。連人物動(dòng)作的一些停頓感都把握到了。還有AI最不擅長(zhǎng)的頭發(fā)問(wèn)題,視頻中的效果也沒(méi)有太多違和感。最后再來(lái)一個(gè)抽象的(doge):鳴人向哆啦A夢(mèng)索要草帽,一個(gè)女孩拿著草帽和哆啦A夢(mèng)一起出場(chǎng),然后柯南在一邊思考。輸入圖像:來(lái)看看海螺的生成效果。視頻中把鳴人、哆啦A夢(mèng)、草帽這幾個(gè)要素都自然地組合在了一起,不過(guò)因?yàn)閜rompt中柯南用的是conan這個(gè)說(shuō)法,它還沒(méi)能完全理解。視頻整體還是非常自然的,可以看到一些衣擺和頭發(fā)的都很生動(dòng)。Hailuo I2V-01-Live是海螺Image-To-Video系列的最新模型,在生成畫面的流暢性和動(dòng)作的生動(dòng)連貫性上有很大提升。它主要針對(duì)穩(wěn)定性和細(xì)微表達(dá)進(jìn)行了優(yōu)化,還支持非常豐富的美術(shù)風(fēng)格,可以生成更流暢和精致的作品。更多網(wǎng)友作品網(wǎng)友們見(jiàn)狀自然是按捺不住,馬上創(chuàng)作了很多作品。比如最近超火的《雙城之戰(zhàn)》中的Jinx舉牌:對(duì)比之前的I2V-01模型,人物的動(dòng)作都順滑了很多,體驗(yàn)就像是從24幀提升到了60幀。更復(fù)雜的插畫和水彩風(fēng)格也輕松拿捏了:再比如知名博主海辛Hyacinth嘗試的中世紀(jì)插畫風(fēng)格:還有類似經(jīng)典動(dòng)漫《超時(shí)空要塞》風(fēng)格的飛船片段:自帶鏡頭調(diào)度的經(jīng)典日本動(dòng)漫風(fēng)格+武士元素:甚至連水墨風(fēng)格、插畫風(fēng)格、熟悉的迪士尼3D風(fēng)也都可以:國(guó)產(chǎn)AI視頻模型之光提到MinMax的海螺AI(Hailuo),事實(shí)上已經(jīng)在的視頻創(chuàng)作社區(qū)里火了很久了,是這一波國(guó)產(chǎn)AI視頻模型里面絕對(duì)的國(guó)產(chǎn)之光!在Vbench(知名視頻生成模型的測(cè)試基準(zhǔn))的多個(gè)維度上,它都名列前茅,尤其是在畫面的生成質(zhì)量維度上,拿下了第3名的好成績(jī)。此前也經(jīng)常被國(guó)內(nèi)友用來(lái)搞一些奇怪的meme或者影視劇二創(chuàng)。比如惡搞《黑客帝國(guó)》:還有專業(yè)電影導(dǎo)演Dave Clark用海螺生成非常有質(zhì)感的科幻電影片段:多位網(wǎng)友表示,海螺模型的優(yōu)點(diǎn)主要是生成表情更細(xì)膩和動(dòng)作更流暢方面。一起看點(diǎn)例子感受一下:比如下面這個(gè)國(guó)外爆火的視頻,畫面的女人瞬間就從大笑變成了掩面哭泣,但是變化過(guò)程非常自然,看著還很有代入感:仔細(xì)觀察還能看到姐的眼眶的淚光逐漸增加,還有眉頭慢慢皺起的過(guò)程,這演技絕對(duì)影后級(jí)。生氣、傷心、害怕、驚訝……多種表情都可以快速生成:再看看下面這個(gè)海螺生成的奔跑畫面,作者表示,不僅生成更加自然,而且在角色的一致性控制上也非常完美。One More Thing在圖像和視頻生成模型的下半程,海螺專注發(fā)力二次元風(fēng)格,而其他各家公司也都開(kāi)始主打“風(fēng)格化”、“差異化”比如Runway的frames功能,可以聯(lián)動(dòng)修改多個(gè)相關(guān)畫面:還有最近爆火的recraft的復(fù)古膠片風(fēng)圖像:以及剛剛開(kāi)源的騰訊混元的寫實(shí)主義:有藝術(shù)家評(píng)論道,以后挑模型就像是在挑選不同風(fēng)格的相機(jī)品牌一樣了,真的很有趣!參考鏈接:[1]https://x.com/Hailuo_AI/status/1863961575574622662[2]https://huggingface.co/spaces/Vchitect/VBench_Leaderboard— 完 —MEET2025大會(huì)在即倒計(jì)時(shí)一周 ? 歡迎報(bào)名?一年一度的科技頂流盛會(huì)就要來(lái)了!??兩場(chǎng)GenAI Talk,一場(chǎng)具身智能圓桌,直指時(shí)下熱門議題!工業(yè)界學(xué)術(shù)界頂流大咖齊聚,還有兩份關(guān)鍵參考「年度AI趨勢(shì)報(bào)告」、「2024人工智能年度評(píng)選」榜單即將發(fā)布!了解詳情?點(diǎn)擊報(bào)名參會(huì),12月11日,期待與您一起預(yù)見(jiàn)智能科技新未來(lái)!左右滑動(dòng)查看最新嘉賓陣容點(diǎn)這里?關(guān)注我,記得標(biāo)星哦~一鍵三連「點(diǎn)贊」、「分享」和「在看」科技前沿進(jìn)展日日相見(jiàn) ~

粵公網(wǎng)安備 44011502001135號(hào)