大家好，這里是和你們一起探索 AI 的花生~

隨著 AI 技術的不斷發(fā)展，AI 視頻的生成效果也跨上了新的臺階，在畫面質量、動作流暢度、角色一致性、提示詞理解等方面均有明顯提升，達到了 “以假亂真” 的水平。而工具變強大后，人們的想象力也得到了進一步地釋放，各種由 AI 生成或編輯的視頻、動圖在互聯網上瘋傳，已然成為最新的視頻流量密碼。

今天就帶大家了解 7 種最近非常熱門的 AI 視頻創(chuàng)作思路以及它們的實現方法，看完之后你會發(fā)現 AI 視頻創(chuàng)作遠比想象中簡單，即使是普通人也可以輕松抓住這一波流量~

相關推薦：

一、奇異類 AI 視頻

奇異類 AI 視頻是用 AI 制作出現實中本來不存在的內容，通過罕見、奇異的畫面來吸引人們的關注，比如熊貓彈吉他、小貓炒菜、村民養(yǎng)殖恐龍致富、魔幻 T 太秀等。這種類型的 AI 視頻制作起來也是最簡單的，快的話一分鐘就能搞定，其制作方式一般分為兩種。

Kling 通過文本生成的 “大熊貓彈吉他” 視頻

① 一是直接通過文字來生成，只需要在AI工具中輸入你的想法，比如 “一只北極熊在開賽車” ，就能很快得到對應的結果。不過從視頻質量的角度來說，目前只有 Kling 可靈、Runway Gen-3 這兩款模型能較好地理解提示詞并生成逼真的視頻。

Kling 目前還在內測，需要去官網加入等候名單，通過后可每天免費生成 2 次。而 Runway Gen-3 需要開會員才能使用，最低 15 美元 / 月，所以它們的使用門檻還是比一般的 AI 視頻工具高一點。大家可以先去 Kling 官網排隊，有條件的話則推薦直接使用 Runway Gen-3。

了解 Runway： http://76r.com.cn/gen-2

了解 Runway Gen-3 模型： http://76r.com.cn/runway-gen-3-alpha

Runway 通過文本生成的魔幻 T 臺秀

② 另一種方法是先通過 AI 繪畫工具生成圖像，再用 AI 視頻工具添加動態(tài)。這種方式的好處是我們可以借助 AI 繪畫的強大能力，生成各種奇幻的、不可思議的寫實類場景，由此得到的視頻內容也會更多樣精致，可控性也更高，可以說無論你的腦洞有多大，AI 都能給你滿意的結果。

目前可用且效果較好的圖生視頻工具有 Dream Machine、可靈 Kling 和即夢 Dreamnia 等。其中 Dream Machine 之前專門寫文章給大家介紹過，它的圖生視頻質量非常高，且每月有 30 次的免費生成額度，對新手來說非常友好。像 “村民養(yǎng)殖恐龍致富” 這種類型的視頻，如果你目前無法用上 Kling，也可以通過以下步驟生成：

1. 寫好故事劇情和腳本，可以用 ChatGPT、文心一言等工具輔助；
2. 根據腳本，通過 Midjourney、SD WebUI 等 AI 繪畫工具生成多個分鏡圖像，比如 “中國村民選育恐龍蛋” 、"村民照料小恐龍"、“村門口的恐龍雕塑” 等；
3. 將圖像逐張上傳到 Dream Machine、Dreamnia、Runway 中工具中，配合提示詞添加對應的動效；
4. 將生成好的 AI 視頻片段導入視頻剪輯軟件中，進行配音、加字幕等后期處理，最后導出。

了解 Dream Machine： http://76r.com.cn/dream-machine

了解 Dreamnina： http://76r.com.cn/dreamina

二、AI 搞怪梗圖

爾康戴墨鏡、紫薇吃爆米花、蒙娜麗莎戴帽子…… 這些應該是最近最熱門的一類 AI 視頻了，各種我們熟悉的經典老圖，在 AI 的加持下煥發(fā)出新的生命力，看完令人忍俊不禁。而這些梗圖也很容易在網上實現病毒式傳播。

這類視頻也是通過為圖像添加動效的方式實現的，所以還是推薦通過可靈 Kling 和 Dream Machine 這兩款工具來實現，它們都可以根據圖像+提示詞，生成出符合需求的、與原畫面無縫銜接的新內容。如果你有喜歡的電視劇或者世界名畫，可以大膽發(fā)揮想象，讓里面的人物做出意象不到的動作。

Kling 處理后的表情包梗圖，視頻源自網絡，侵刪

用 Dream Machine 為世界名畫添加動效，視頻來源 Twitter @KodyKurth

三、老照片場景重現

這也是最近很火的一類 AI 視頻制作思路，讓 AI 為老照片添加動態(tài)，原本塵封的記憶瞬間變得鮮活，非常令人感動。這類視頻的做法方法與前一種類似，通過 Dream Machine、Dreamnia 或 Kling 對圖像添加動態(tài)；如果你對圖像的動態(tài)要求不高，那么 Runway Gen-2、Morph、Haiper 這些 AI 工具也可以使用。

了解 Haiper： http://76r.com.cn/haiper-ai

用 AI 把老照片變成視頻，視頻源自網絡，侵刪

如果老照片比較模糊、有比較嚴重的破損，最好先修復一下再使用，否則會影響生成效果。會 SD 的小伙伴可以通過 controlnet tile 模型來修復，這里推薦 @Datou 老師的 Old Photo Restoration XL 工作流，效果相當不錯。此外也可以借助免費的老照片修復工具來實現圖片復原。

1. Datou 的老照片修復 ComfyUI 工作流： https://openart.ai/workflows/datou/old-photo-restoration-xl/vKtihSX1DGBiBjAovlSP
2. RestorePhotos.io： https://www.restorephotos.io/
3. Restore Photos： https://restorephotos.one/

四、AI 視頻風格化

視頻風格化也稱視頻轉繪，是指將真人視頻轉換為一種新的風格，比如動漫、3D 卡通、剪紙風等，可以帶給我們一種全新的視覺體驗。目前短視頻平臺上就有賬號專門將《愛情公寓》《大話西游》等經典電影、電視劇的進行動畫轉繪處理，流量也相當不錯，而且這項技術也已經應用到創(chuàng)意視頻、廣告營銷領域。

《愛情公寓》轉繪視頻截圖，來源：抖音@ 逆光文化

此類 AI 視頻也有專門的工具可以生成，比如我之前為大家推薦過的 DomoAI。它支持將真人視頻轉為日式動漫、美式動漫、3D 卡通、像素、剪紙等多種風格，效果非常支持穩(wěn)定，此外還支持風格自由遷移，只需上傳一張風格圖像，DomoAI 就能將此風格復制到一個視頻中。

了解 DomoAI： http://76r.com.cn/domoai-2

DomoAI 的視頻轉動漫風效果

五、讓圖片跳舞

目前大部分的 AI 視頻工具都無法正確生成跳舞、體操等復雜的肢體動作，所以出現了一類新的工具，專門將真人動作復制到圖像角色身上，比如阿里的 Animate anyone、騰訊的 MusePose 以及最新的 MimicMotion（這些都是開源模型，大家可以通過 Pinokio 部署到本地使用），嘗試對象可以是真人圖像、3D 卡通圖片、動漫圖像或者你的手辦照片。

通過 MimicMotion 將動作遷移到圖片，視頻來源：reddit @ bkdjart

如果你不會使用開源模型，那么之前我推薦過的 Viggle 也可以實現同樣效果，而且可以免費使用。只需上傳一段動作視頻和一張角色圖像，viggle 就能將此動作復制到圖像中的角色身上，同時保證角色身體的完整立體，以及背景不變。Viggle AI 目前還支持替換視頻中的角色形象，以及將真人面部動作遷移到圖像的人物面部，這些功能都非常適合用來生成創(chuàng)意搞怪的視頻。

了解 Viggle: http://76r.com.cn/viggle

六、創(chuàng)意過渡視頻

Dream Machine、Dreamina、Kling 等 AI 視頻生成工具現在都支持「首尾幀」功能，用戶可以上傳兩張圖像，一張做為視頻的開頭，一張做為視頻的結尾，這樣用戶就能更準確的控制視頻的生成效果。

這項功能的本意是為了提升動態(tài)穩(wěn)定性，比如人物轉身、樹苗生長等，但有人嘗試在差異明顯、或原本不相干的圖像間實現過渡，從而得到了一些意想不到的效果。比如將不同的表情包串聯在一起，或者實現人物在不同場景間穿梭的效果。

DreamMachine 制作的創(chuàng)意過渡視頻。來源：Twitter @madpencil_

除此之外，Runway 的 Gen-3 模型可以直接通過文本生成高質量的場景過渡，比如下面這個視頻，它可以在一系列場景變化后，讓畫面最終定格為文字標題，質量之高感覺直接拿來做視頻片頭都沒有問題。

七、AI 短片

通過 AI 制作短片是應用最廣泛、最有發(fā)展?jié)摿Φ囊粋€方向。尤其是在 Kling、Runway Gen-3 這些新一代 AI 工具出來之后，AI 視頻更是告別了 “PPT 時代” ，能直接生成流暢清晰的結果，對當前影視制作和視頻后期帶來了顛覆性的影響。CCTV 6、快手、抖音、B 站等平臺都發(fā)起過 AI 短片創(chuàng)作比賽，足見市場對其發(fā)展的看好。

一部 AI 短片的制作會用到多種 AI 技術，包括但不限于 AI 生成故事情節(jié)和拍攝腳本，AI 生成視頻分鏡畫面、AI 圖像處理、AI 添加動效、AI 生成背景音樂 / 主題曲、AI 配音/唇形一致等，當然也少不了 Ps、Pr、Ae 的專業(yè)工具的輔助。

目前用 AI 制作的短片已經在現實中廣泛傳播。比如在 B 站、央視頻、抖音上，就有很多賬號選擇用 AI 進行內容制作，包括人生哲理、兒童故事、唐詩宋詞、歷史典故、時政內容等，比如我最近在 B 站上刷到一個短片《動物軍團》，用 AI 生成不同的動物指代不同的國家，來演繹最近的國際局勢。

這種視頻的制作相對簡單，劇本、配音都是人工完成的，視頻畫面及動效則 AI 生成。應該是先用 Midjourney 生成圖像，然后再用 Haiper、Runway 或 Pika 這樣的 AI 視頻工具添加動態(tài)，最后用剪輯軟件拼接合成。與傳統(tǒng)的制作流程相比，AI 視頻制作具有時間短、成本低、技術門檻低的優(yōu)勢，呈現出來的效果也很有趣味性和吸引力。

還有一些是更專業(yè)的 AI 短片，比如 AI 音樂 MV、AI 宣傳短片、AI 短劇等。這種一般由專業(yè)影視從業(yè)人員或團隊制作，所以在劇本內容、劇情節(jié)奏、美學風格、角色設定、動態(tài)運鏡、配音配樂等方面都掌控得非常到位，AI 視頻的質量也更高，能直接達到商用級別，但相對應的制作時間和成本也會更高一些。

下面是一個最近爆火的全 AI 制作的音樂 MV，由網友 @Arata_Fukoe 使用多個目前最新最強大的 AI 工具合作制作，質量非常高。其使用的工具包括：

1. Midjourney、Stable Diffusion 制作視頻分鏡圖片
2. DreamMachine、Runway Gen-3、Kling 對圖片添加動態(tài)
3. ChatGPT 生成歌詞，Suno AI 完成歌曲制作
4. Photshop 編輯圖片，Ae 優(yōu)化動態(tài)效果

還有之前由國人 @閑人一坤 1982 制作的 AI 概念短片《山海奇鏡》，在 2024 年年初時，短片看起來還是有 “PPT 感” 的，細節(jié)也不是很清晰；而現在在最新的 AI 視頻技術的加持下，新發(fā)布的《山海奇鏡之劈波斬浪》預告片質量有了明顯提升，并且已經由概念短片正式落地成為一個系列短劇，在短視頻平臺上播出。短短半年時間，AI 視頻就從“自娛自樂” 進化為 “商業(yè)落地”，發(fā)展速度的確驚人。

2024 年 1 月的《山海奇鏡》概念預告片：

2024 年 7 月最新發(fā)布的《山海奇鏡之劈波斬浪》預告片：

以上就是對最近較熱門的 7 類 AI 視頻的盤點，與傳統(tǒng)視頻內容制作相比，AI 視頻在學習成本、制作時間等方面都更有優(yōu)勢，即使你之前完全沒有基礎，也能很快上手做出自己的作品，很適合普通人入局；而對專業(yè)視頻、影視制作人員來說，AI 更是提升效率、釋放創(chuàng)造力的神器。

了解更多 AI 視頻工具，可以查看優(yōu)設網 「AI 視頻」專欄，里面有多種 AI 音視頻神器介紹，以及大神分享的制作經驗。也可以關注優(yōu)設微信視頻號，每天都會分享最新的 AIGC 資訊和神器。每天都會分享最新的 AIGC 資訊和神器，讓你輕松掌握 AI 發(fā)展動態(tài)。也歡迎大家掃描下方的二維碼加入“優(yōu)設 AI 知識交流群”，和我及其他設計師一起交流學習 AI 知識~

如果你沒有多余的精力自學 AI 視頻的內容，不知道從何入手，可以了解我的最新課程《AI 視頻零基礎系統(tǒng)入門》。我將從文生視頻、圖生視頻、視頻生成視頻、數字人視頻 4 個方面，系統(tǒng)全面地帶你了解目前主流的 AI 視頻制作方式以及優(yōu)缺點，課程內容包括：

1. 十余種熱門 AI 視頻生成神器用法詳解，輕松掌握大神同款工具；
2. 附贈課程專屬工具清單，收錄了近 300 款 AI 視頻、音頻、文案神器，全面賦能 AI 視頻創(chuàng)作
3. 高質量免費自學資源、最新 AI 視頻資訊獲取渠道全分享

相關鏈接：

1. 可靈 Kling 官網： https://klingai.kuaishou.com/
2. Runway Gen-3 官網： https://app.runwayml.com/video-tools/teams/Huasheng_/dashboard
3. Dreamnina 官網： https://dreamina.jianying.com/ai-tool/home
4. Luma AI - DreamMachine 官網： https://lumalabs.ai/dream-machine
5. Haiper AI 官網： https://haiper.ai/
6. DomoAI 官網： https://www.domoai.app/
7. Viggle 介紹： https://www.viggle.ai/login

推薦閱讀：