 3D:萬(wàn)相 Animate 2 硬碰混元 HY-Motion,開源角色動(dòng)畫這對(duì)“雙子星”誰(shuí)能先干活)
2D 對(duì) 3D萬(wàn)相 Animate 2 硬碰混元 HY-Motion開源角色動(dòng)畫這對(duì)“雙子星”誰(shuí)能先干活【免費(fèi)下載鏈接】Wan2.2-Animate-2-14B項(xiàng)目地址: https://ai.gitcode.com/hf_mirrors/Wan-AI/Wan2.2-Animate-2-14B最近做短視頻、做游戲、做數(shù)字人的朋友大概都被同一個(gè)問(wèn)題戳中過(guò)想讓一個(gè)角色動(dòng)起來(lái)怎么就這么貴以前的路子只有兩條。要么請(qǐng)動(dòng)捕演員、租棚、穿一身帶傳感器的衣服一天幾萬(wàn)塊起步要么動(dòng)畫師坐在電腦前一幀一幀掰胳膊掰腿十秒鐘的鏡頭磨一個(gè)星期?,F(xiàn)在兩家大廠把這件事的門檻直接砸到了“一張圖 一段手機(jī)視頻”和“一句話”的水平。一邊是阿里通義萬(wàn)相的Wan-Animate-2萬(wàn)相 Animate 214B 參數(shù)Apache 2.0 開源另一邊是騰訊混元的HY-Motion 1.0把文字生成 3D 人體動(dòng)作的模型第一次做到了十億參數(shù)級(jí)。名字都帶“動(dòng)畫”但它們是兩條完全不同的路。今天就用大白話把這兩顆“開源雙子星”掰開揉碎講清楚。一、一句話分清一個(gè)是“借身體”一個(gè)是“買動(dòng)作”先記住一個(gè)最關(guān)鍵的差別。萬(wàn)相 Animate 2 干的是 2D 的活你給它一張角色照片再給它一段真人表演的視頻它就讓照片里的角色照著視頻把動(dòng)作、表情、甚至連衣擺的擺動(dòng)都演一遍。說(shuō)白了就是給照片請(qǐng)了一位“動(dòng)作替身”。你想讓一只穿制服的貓?zhí)p人舞找一段真人雙人舞視頻喂進(jìn)去就行?;煸?HY-Motion 干的是 3D 的活你給它一句英文描述比如“一個(gè)人先蹲下然后借著起身的力量把杠鈴舉過(guò)頭頂”它吐出來(lái)的不是視頻而是一段骨骼動(dòng)作數(shù)據(jù)。說(shuō)白了就是給 3D 角色買了一套可以反復(fù)使用的動(dòng)作素材。一個(gè)像“描紅字帖”比著真人視頻描一遍一個(gè)像“動(dòng)作作文”你說(shuō)場(chǎng)景它憑空寫出一段能用的動(dòng)作。這個(gè)差別決定了它們后面所有的分工。二、萬(wàn)相 Animate 2 的狠活不用先抽骨架還能換機(jī)位萬(wàn)相 Animate 2 最顛覆的地方是它把過(guò)去那套“中間商”給砍了。以前的同類方案得先把真人視頻拆成一堆火柴人骨骼點(diǎn)再把骨骼套到角色身上。中間只要抽錯(cuò)一個(gè)關(guān)節(jié)成片里人物的臉就崩了、手就擰成麻花了行業(yè)里管這叫“身份漂移”。萬(wàn)相 Animate 2 改成端到端——直接看視頻學(xué)動(dòng)作不經(jīng)過(guò)“抽骨架”這道二傳手。按官方說(shuō)法動(dòng)作保真度和角色一致性都因此上了一個(gè)臺(tái)階。從官方演示看它能干的事挺“離譜”真人跳一段輪滑、拉小提琴、跳街舞換成動(dòng)漫角色、機(jī)器人、甚至小狗來(lái)演一個(gè)人跳能帶著一群人一起跳兩個(gè)人跳也能驅(qū)動(dòng)多個(gè)角色角色和真人身材比例差很多也能穩(wěn)住不崩。更妙的是文字控制機(jī)位。同一段舞蹈你可以讓它從側(cè)面再來(lái)一遍、從高處俯拍一遍。做 2D 的都懂這在過(guò)去等于重畫現(xiàn)在等于“換個(gè)攝像機(jī)”。另外它還準(zhǔn)備了一個(gè)Lite 實(shí)時(shí)版目標(biāo)是把延遲壓到直播、數(shù)字人客服能用的水平。不過(guò)要提醒一句目前開源放出來(lái)的是 Base 版和 10 步蒸餾加速版實(shí)時(shí) Lite 的權(quán)重還沒(méi)公開別被標(biāo)題黨帶跑。三、混元 HY-Motion 的狠活一句話生成一副會(huì)演戲的骨架HY-Motion 走的是另一條更“工業(yè)”的路。它是目前開源里第一個(gè)把文字生成動(dòng)作的模型做到十億參數(shù)級(jí)別的。訓(xùn)練數(shù)據(jù)超過(guò) 3000 小時(shí)再用 400 小時(shí)精修最后還請(qǐng)人來(lái)“打分”做強(qiáng)化學(xué)習(xí)專門治那種“動(dòng)作能做但做得不像人”的毛病。它最討喜的地方是輸出的是標(biāo)準(zhǔn)骨骼動(dòng)畫而不是一段只能看的視頻。這意味著什么意味著這段動(dòng)作可以導(dǎo)進(jìn) Blender、Unity、UE5套到你自己的角色身上改節(jié)奏、改幅度、拼接、循環(huán)全都行。社區(qū)已經(jīng)有人做了一鍵導(dǎo)出 FBX 的工具還有人把它接到了 MMD 和虛幻引擎里。不過(guò)它的脾氣也很明確官方把“不支持”寫得明明白白只認(rèn)人形貓貓狗狗、機(jī)器人、非人類角色都不行不支持多人互動(dòng)兩個(gè)人打架、擁抱這類暫時(shí)別想不支持描述衣服、長(zhǎng)相、情緒、鏡頭和場(chǎng)景提示詞建議用英文60 個(gè)詞以內(nèi)。所以它更像一個(gè)專業(yè)的動(dòng)作素材庫(kù)而不是“許愿機(jī)”。四、硬碰硬誰(shuí)的門檻更友好這是普通人最關(guān)心的一段。萬(wàn)相 Animate 2吃顯卡是真的吃。官方默認(rèn)配置是 8 張 A80080G 顯存的企業(yè)級(jí)卡跑 720P2 張 A800 能跑 480P。這個(gè)配置個(gè)人玩家基本只能在云上租。好消息是它配套做得全有 ComfyUI 插件、有 Diffusers 支持、有本地可視化界面魔搭社區(qū)上還有在線體驗(yàn)入口排隊(duì)就能試不用自己買卡?;煸?HY-Motion單卡就能碰。完整版 1.0B 模型最低約 26GB 顯存輕量版 0.46B 約 24GB。翻譯一下一張 RTX 4090 屬于“剛剛夠得著”還得省著用——一次只出一個(gè)結(jié)果、提示詞別太長(zhǎng)、動(dòng)作別超過(guò) 5 秒。它同時(shí)支持 macOS、Windows、Linux HuggingFace 上有免費(fèi)在線試用甚至有人在 Kaggle 的免費(fèi) P100 上跑通了。單看“自己電腦能不能跑”HY-Motion 明顯低一檔單看“成片能有多復(fù)雜、多好看”萬(wàn)相 Animate 2 高一頭。五、生態(tài)之戰(zhàn)誰(shuí)能更快進(jìn)生產(chǎn)管線工具好不好不看 demo看它能不能塞進(jìn)現(xiàn)有的活兒里。萬(wàn)相 Animate 2 這邊走的是“大廠標(biāo)準(zhǔn)件”路線Apache 2.0 協(xié)議、Diffusers 原生支持、DiffSynth、ComfyUI、Gradio 一個(gè)不落。對(duì)做短劇、做電商模特?fù)Q人、做直播數(shù)字人的團(tuán)隊(duì)來(lái)說(shuō)幾乎是拿來(lái)就能接。HY-Motion 這邊走的是“社區(qū)野蠻生長(zhǎng)”路線。官方只給了推理代碼和權(quán)重剩下的全靠網(wǎng)友ComfyUI 插件好幾個(gè)版本FBX 導(dǎo)出器、UE5 接入、Blender 到 Cascadeur 再到 Unity 的整條鏈路、甚至還有人做了免費(fèi)的 Windows 客戶端。這種生態(tài)熱度說(shuō)明它是真有一批 3D 從業(yè)者在用。但有個(gè)細(xì)節(jié)得提醒HY-Motion 的許可證不是 Apache 2.0屬于自定義條款真要商用之前務(wù)必自己去看一眼授權(quán)說(shuō)明。萬(wàn)相 Animate 2 是 Apache 2.0這點(diǎn)對(duì)創(chuàng)業(yè)團(tuán)隊(duì)友好得多。六、普通人到底怎么上手給你三條最實(shí)際的路第一條零成本看效果。兩個(gè)模型都有在線體驗(yàn)入口萬(wàn)相在魔搭混元在 HuggingFace。先上傳一張圖、輸入一句話看看是不是你想要的那個(gè)味兒再?zèng)Q定要不要折騰本地部署。第二條想批量出片。走 ComfyUI。萬(wàn)相這邊可以租云顯卡跑 720P混元這邊用輕量版配一張 4090出骨骼動(dòng)畫再導(dǎo)進(jìn)引擎。第三條先想清楚你要的是“視頻”還是“資產(chǎn)”。這才是最本質(zhì)的賬萬(wàn)相 Animate 2 給你的是一段 2D 視頻發(fā)抖音、做廣告、做直播貼片直接能用但它換不了角度、改不了動(dòng)作、也沒(méi)法二次利用HY-Motion 給你的是一份 3D 動(dòng)作資產(chǎn)第一次生成要調(diào)但調(diào)好之后可以套一百個(gè)角色、拍一百個(gè)鏡頭。一個(gè)是消耗品一個(gè)是固定資產(chǎn)。七、寫在最后它們其實(shí)不是對(duì)手表面看是 2D 撞 3D實(shí)際上這兩條路最后大概率會(huì)握手。行業(yè)里已經(jīng)有人在這么干了先用 3D 模型生成標(biāo)準(zhǔn)動(dòng)作再渲染成 2D 角色演出來(lái)。3D 負(fù)責(zé)“動(dòng)作合理、可編輯”2D 負(fù)責(zé)“長(zhǎng)得好看、出片快”。所以這場(chǎng)“對(duì)撞”沒(méi)有輸家。真正的贏家是那些以前請(qǐng)不起動(dòng)捕團(tuán)隊(duì)的小工作室、獨(dú)立游戲開發(fā)者、以及一個(gè)人干五個(gè)崗的自媒體人。最后留個(gè)問(wèn)題給你如果只能選一個(gè)你是更想讓照片里的人立刻動(dòng)起來(lái)還是更想讓游戲里的角色憑空演一段評(píng)論區(qū)聊聊你的場(chǎng)景說(shuō)不定下一個(gè)爆款工作流就是從這條留言里長(zhǎng)出來(lái)的?!久赓M(fèi)下載鏈接】Wan2.2-Animate-2-14B項(xiàng)目地址: https://ai.gitcode.com/hf_mirrors/Wan-AI/Wan2.2-Animate-2-14B創(chuàng)作聲明:本文部分內(nèi)容由AI輔助生成(AIGC),僅供參考