嗨大家好!今天是你們的 Vidu 創(chuàng)意小助手阿真!
我們使用 AI 生成視頻都遇到過一些普遍痛點,比如角色難以保持統一,多個元素同框畫風就不穩(wěn)定,還有就是每個場景都要從零開始去構思分鏡,費時又費力,最后視頻畫面出來效果還糊了吧唧的。
最近上新 Vidu 的 Q1 多參考生視頻的模型有很好地解決這些痛點。
怎么說呢,就是它的玩法真的和以往不同,我們上傳幾張圖片素材,然后描述我們想要的效果,就能組成一個畫面場景,幾張圖就把背景環(huán)境角色都給組到一起,整體和諧還能保持角色一致性,為我們組成一個隨叫隨到的“虛擬劇組”。
但我這么說好像是太抽象了,我們快速過一下用法然后看看今日份趣味案例吧!后面還有一個動畫預告片效果和制作拆解,一起繼續(xù)往下看~
今日為 Vidu 上鏈接: https://www.vidu.cn/
往期介紹:
Vidu 是很成熟的 AI 視頻產品了,做 AI 視頻的可能大都是它的老朋友了。影視制作、動畫制作等領域都手拿把掐的,之前評論區(qū)也大家沒少提名,性價比多高不用我說。今天主要分享我用 Vidu Q1 參考生視頻這個功能的一些經驗。
打開鏈接主頁點擊「參考生視頻」:
然后查看這部分:
- 模型選擇 Vidu Q1。
- 然后選擇上傳圖片或者上傳圖片存到主體庫(后面詳細說)。
- 然后就是注意視頻數量,想要一次跑多個就選多點,想要一個個來就保持 1 個。
目前單條視頻消耗 20 積分,按照基礎套餐計算的話,成本不到 9 毛錢,價格實惠效果好。然后還有錯峰模式,不著急的時候盡管開起來盡情 roll 哈哈哈。這個強推!
Vidu Q1 參考生視頻, 官方的說明是支持上傳最高達 7 張參考圖像(可以是人物、背景、道具等等)。清晰度從 Vidu 2.0 的 720P 升級到了 1080P,我們待會兒可以一起看看清晰度和穩(wěn)定程度。
先從簡單的開始。
比如,我有一個玩偶,我希望它在我家臥室里蹦蹦跳跳行嗎?當~然可以。
提示詞看起來很多,不過不是我寫的,我就寫的下面這樣???;蛘咭部梢渣c擊打開下面的「專業(yè)模式」它就自己優(yōu)化了。
這個對話框里的「圖 2」「圖 1」可以通過點擊鼠標進行移動。
AI 優(yōu)化中
點擊下面的標簽按鈕可以修改風格、運動幅度、景別等等細節(jié)。
如何選擇 Vidu 的提示詞模式?
下面是我的一點個人經驗:
首先 Vidu 的提示詞遵循是很不錯的。
Vidu 的提示詞模式,我打個比方:一般模式就像相機的 Auto 模式,簡單易用,適合大多數場景,提示詞清晰就可以生成穩(wěn)定效果;專業(yè)模式則像手動模式,允許精細調整參數,適合熟悉 AI 視頻生成、追求個性化效果的用戶。
我個人建議,如果創(chuàng)意思路清晰、場景元素簡單,一般模式就可以生成高質量視頻;如果需要比較復雜的效果或更加精準的控制,專業(yè)模式能提供更多發(fā)揮空間,但是需要更熟悉參數的調試。
在一般模式寫完再用專業(yè)模式優(yōu)化也可以,建議可以根據需要自己去補充和調整。
繼續(xù)案例。一個主體可以,多個可不可以?當~然可以。
比如叫幾個頂流來家里開 Party。
也是和之前一樣的上傳參考圖+簡單描述,一致性可以說很強了。
上傳的圖片,可以不用摳圖,但是我實測后感覺白色背景效果最好,純色背景、虛化背景其次,效果顯著好過背景雜亂的圖片,并且不會影響我們給到的背景。得到的效果更符合要求。
好像忘記了什么,哦對,忘了分鏡??辞懊娴囊曨l也可以感覺到,他們這次主打的就是零分鏡生成視頻,就像我們直接告訴一個樂高大師:“幫我用這些積木(元素圖片)拼一個故宮(提示詞)?!?我們才不用管他先拼哪個建筑后裝哪個窗戶,他會憑借自己的“專業(yè)知識”(AI 算法)直接給我們一個完整的作品。
想到這里,感覺還可以有更多腦洞!
比如實現夢想系列??
1. 抱一抱牢底坐穿獸
提示詞:
[@阿真]抱住了[@企鵝]
2. 讓我貓去大草原見遠房親戚
提示詞:
[@貓咪]背著書包在草原上旅行,和[@老虎]合影
工作好累啊??
3. 叫個怪獸一起做牛馬
提示詞:
[@男人]和[@小怪獸]左右相對而坐,各自一臺電腦,一起工作
上面這個視頻數量不夠只好 GIF 處理了。
破次元壁的活也可以整??
4. 蒙娜麗莎和林黛玉合影
[@蒙娜麗莎]掏出手機,和[@林黛玉]一起合影,中景鏡頭
其實難的不僅僅是把元素整合到一起,還有各種不同的元素整合在一起整體還和諧,角色一致性保持了也沒有大 bug。
生成上面這些視頻后,我腦子里好像突然有個小燈泡突然點亮了:既然它可以精準記住多個主體,切換視角也依然保持環(huán)境整體風格,那么想用它做更長、更有趣的動畫之類的是不是也可以呢?
說干就干。
我嘗試用 Vidu 做了一個 3D 動畫預告片,我們可以先看視頻效果:
疊甲:我不會專業(yè)的動畫制作,剪輯也就是個入門水準,劇情也幾乎等于沒有,大家主要看整體畫面效果哈。
該說不說,1080P 是真的爽啊朋友們!480P 的效果和這個比起來像上了高斯模糊一樣。
從開始做故事大綱到最后完成整個預告片大約花了 10 個小時,因我之前確實沒有這樣完整的一條龍全自己做過。其實最難的還是從想象到變成影像這一部分,不過 Vidu 大大提高了我的效率。
為了給 Vidu 上強度,我搜羅了 10 個不同設定的角色,其中有一部分還是奇形怪狀比較難還原角色外貌和材質的:
還有幾十個場景(場景圖片放比較多,最后只選了其中一部分):
圖片風格也不是完全統一的,有 3D 的有 2D 的。就為了為難一下 Vidu
我的視頻制作流程:
疊甲:我不會專業(yè)的動畫制作,這里主要是為測試視頻效果,所以整體都是怎么簡單怎么來了,所以這里的流程僅供參考,比較菜,后續(xù)我去學習一下,等邏輯理順了再和大家分享!
- 和 AI 對話獲得靈感,輸入自己的要求。然后一步步對話,得到自己最終想要的內容:故事梗概,人物設定、環(huán)境背景設定表(包括生圖提示詞)、視頻腳本表格。
- 生成角色設定圖和角色三視圖、環(huán)境圖(這里為了節(jié)省時間直接輸出為 3D 效果的圖了,但是部分環(huán)境圖不夠 3D 質感,粗糙了點)
- 使用 Vidu Q1 參考生視頻,按視頻腳本生成視頻
- 后期拼接剪輯
繼續(xù)分享生成視頻的流程。
首先是上傳準備好的角色的三視圖到主體庫。如果主體很多了,建議也可以根據自己的個人習慣打好標簽。
然后重復這一步,可以先把所有角色都上傳到主體庫。
然后生成視頻的步驟就是:
選擇主體??上傳場景??輸入提示詞
看看參考圖和視頻:
提示詞:
[@露芙]坐在[@圖 1]的床上
可以仔細對比圖片和視頻中的角色和背景、室內物體的細節(jié),還原度可以說相當高了。
細心的朋友們大概能看出來,場景圖的透視適應性地發(fā)生了一些改變,但是圖中的角色和主要元素都好好地還原了。
再來一個奇形怪狀的角色多一點的案例:
推鏡頭,輕盈的光線在水面折射,營造夢幻氛圍。[@泡泡]從一個水泡跳躍到另一個,濺起波光,POV,[@咕咕]跌入泡中驚叫,[@呼嚕]被漂浮的泡泡包圍,呼呼大睡。節(jié)奏輕快。[@呼嚕][@泡泡][@咕咕][@圖 1]
參考多到 Vidu 直呼內行的程度哈哈哈哈。三個以上就確實有點難為它了,抽卡頻率需要增加。
另外,除了角色,其他的比如角色+物體+場景也可以。比如下面這個(圖片太多就不放角色三視圖了):
提示詞:
鏡頭晃動呈現劇烈震動感。[@艾琳]和[@教授·羅因]在穩(wěn)固裝置[@裝置]。雷云在背后翻滾,風元素噴涌,氣氛壓迫感強。[@艾琳][@教授·羅因]
可以對比角色造型和物品細節(jié)的還原程度。另外要更換場景、環(huán)境、角色也非常簡單。
還想單獨提一下,主體庫這個功能挺好用的,常用的角色,可以把圖片上傳到主體庫。
最好不要上傳一個圖中有兩個角色的,替大家試過了,會出來奇怪的混搭哈哈哈。
上傳創(chuàng)建主體的圖片,我個人建議上傳三視圖(正面、左側面或右側面、背面)。社區(qū)中存在多種上傳方式,如單張圖片或多張隨機視角,但三視圖能提供人物的全面立體信息,包括面部特征、服裝細節(jié)和身體結構。
簡單來說,上傳一張圖也行(最少 1 張圖),但上傳三視圖更全面。我在制作預告片視頻的時候,所有角色就都上傳了三視圖,效果還不錯。
「編輯主體」部分的「描述」是自動生成的,我們也可以自行修改以便得到更滿意的生成效果。
一張圖的效果其實也出乎我意料地好了,Vidu Q1 參考生視頻這次的一致性真的強了很多。比如我上傳了自己照片作為主體為接下來的整活做準備:
這里注意,主體最好還是摳圖(加白底),除非你想要的背景就是主體自帶的那個背景,不然圖片背景會影響效果。
然后就是輸入參考圖和選擇主體庫的自己的圖片生成視頻。
這里我玩的是當我穿越到電影里,可以看看電影人物和我本人的還原程度:
下面是巨簡單的提示詞(會說話就行的程度):
大膽想象一下,想和電影里的誰合拍合影都可以,還可以加上自己想加的元素(比如我在第二個加的毯子和第三個的粉色電動車哈哈哈),也彌補了一些我看電影的時候的一些遺憾和實現了一些當時的腦洞。
主體庫還可以沉淀自己的數字資產甚至打造屬于自己的 IP,要調用也方便,省去了每次上傳和描述的繁瑣流程,另外,我們還能使用社區(qū)共享的資源,當然,也可以分享自己的。
還有還有,社區(qū)共享的資源在這里可以找到:
這是真的可以沒有綠幕,沒有布景,也沒什么后期就做出了視頻。對于畫面任何一個部分不滿意直接換圖就可以,對劇情不滿意,修改提示詞重新跑就可以。
另外,如果想做更長的視頻,這個抽幀是很好用的。
如果我們有兩個喜歡的視頻片段想拼接,可以從每個視頻中提取關鍵幀,調整首尾幀以確保視覺和動作的連貫性,然后使用 Vidu 首尾幀功能或視頻編輯軟件將它們無縫連接。
另外還可以繼續(xù)畫質增強提升到 2K 或者 4K。
從簡單的測試到后來做動畫視頻嘗試,整個過程中我真的被 Vidu Q1 參考生視頻的能力震撼到了。
從技術角度來說,1080P 的畫質提升、零分鏡的便捷操作、多主體的穩(wěn)定融合,這些改進都直接解決了我們的痛點。更重要的是,這種"積木式"的創(chuàng)作方式真的降低了視頻制作的門檻,讓每個人都有機會成為導演。
我們都能感知到,AI 視頻產品在快速發(fā)展中,未來肯定還會有更多驚喜。就目前來說,Vidu 已經給了我們足夠的理由去創(chuàng)造,操作簡單、也不需要多么專業(yè)的技能就可以開始做,普通人一樣可以做自己的想做的視頻。
做夢是起點,創(chuàng)意無止境。希望大家用 Vidu 實現更多有趣的創(chuàng)意,做出更多精彩的視頻。也期待大家有更多玩法、用法和想法,在評論區(qū)我們可以一起聊聊~
如果覺得今天阿真的視頻比較有趣,或者分享的內容對你有幫助,歡迎大家猛擊三連給阿真最激烈的催更,感恩~??!
復制本文鏈接 文章為作者獨立觀點不代表優(yōu)設網立場,未經允許不得轉載。
發(fā)評論!每天贏獎品
點擊 登錄 后,在評論區(qū)留言,系統會隨機派送獎品
2012年成立至今,是國內備受歡迎的設計師平臺,提供獎品贊助 聯系我們
AI輔助海報設計101例
已累計誕生 753 位幸運星
發(fā)表評論 為下方 4 條評論點贊,解鎖好運彩蛋
↓ 下方為您推薦了一些精彩有趣的文章熱評 ↓