Runway、Stability AI、Pika 紛紛放大招，最近的 AI 視頻真是神仙打架！大家好我是花生~

前段時間剛給大家介紹過 LCM 技術 和 AI 繪畫 實時生成 的相關內容，沒想到緊接著 AI 視頻領域又迎了一波重大更新，真是令人應接不暇。今天就為大家仔細盤點一下近期幾個主流 AI 視頻工具的發(fā)展動態(tài)，讓你輕松跟上 AI 潮流~

相關推薦：

一、Runway

先說 Runway ，之前已經帶大家了解過它的相關功能，包括文本/圖像轉視頻（Gen2-）,視頻風格化（Gen-1）和視頻幀差值，此外它的功能還包括文生圖、圖生圖、一鍵扣除視頻背景、抹除視頻指定元素等，可以說是目前最強的 AI 視頻生成&編輯工具。

Runway 網站直達： https://app.runwayml.com/

Runway 網站主頁

midjourney 生成的圖像

用 Runway 將圖像轉為視頻，內容來源: https://twitter.com/i/status/1683183085808934912

自 6 月份文本/圖像轉視頻功能上線以來，Runway 一直都在努力提升視頻生成的質量和可控性。8 月份的時候， 它的視頻時長由 4 秒增加至 18 秒，并且新增了「Motion Slider 運動滑塊 」功能，讓用戶可以控制視頻的動態(tài)強度。

不同動態(tài)數值的效果對比。視頻來源： https://twitter.com/i/status/1696868501397426187

9 月份的時候上線了「Camera Motion 相機運動 」功能，讓用戶可以控制鏡頭的運動方向，包括水平左移、水平右移、垂直上移、垂直下移、順時針旋轉、逆時針旋轉、鏡頭推進和鏡頭拉遠。這讓視頻生成的可控性得到提升，也讓 AI 制作電影短片成為可能。

鏡頭前推，來源： https://twitter.com/i/status/1727856162526441853

鏡頭左移，來源： https://twitter.com/i/status/1728403369813757982

就在前幾天，Runway 上線了重磅新功能「Motion Brush 運動筆刷 」，我們只需在圖像上涂抹一個區(qū)域，就能將其變?yōu)閯討B(tài)內容。這種局部處理的方式一方面讓內容控制能精確靈活，另一方面區(qū)域之外的部分仍保持靜態(tài)，從而減輕了圖生視頻中常見的畫面扭曲問題，在處理效率變高的同時也讓整體效果也更逼真，是非常聰明且實用的新功能。

Motion Brush 演示，來源： https://twitter.com/i/status/1728129678395994384

Runway 網站支持 QQ 郵箱注冊，新用戶有 105 秒的免費生成額度，可以生成大約 20 個短視頻，大家可以去官網體驗一下這些新功能。

除了提升視頻生成質量，Runway 也一直在推動 AI 視頻生態(tài)的發(fā)展完善。它去年舉辦了首屆 AI 電影節(jié)（AIFF），邀請全球藝術家使用最新的 AI 技術制作創(chuàng)意短視頻，目前第二屆正在接受投稿。前段時間還舉辦了一個為期 2 天的 AI 短視頻競賽 Gen-48，向全球用戶征集用 Runway 生成的優(yōu)質短視頻，目前已經評選結果已經在官網公布，我看了一下都非常精彩。

AI 電影節(jié)官網： https://aiff.runwayml.com/

Gen-48 官網： https://gen48.runwayml.com/winners

Runway 最近還推出了線上電視頻道 Runway TV，24 小時循環(huán)播放由 AI 制作的視頻，可以看出官方對 AI 視頻發(fā)展的重視和信心。也非常推薦大家去看看這些 AI 視頻，真的會讓人感嘆 AI 技術發(fā)展的迅速和藝術家創(chuàng)意的精彩，從中我們也能一瞥未來視頻制作流程的雛形。

Runway TV 鏈接直達： Runway TV

二、Stable Video Diffusion

AI 視頻領域近期另一個重磅更新就是 Stability AI 推出的 Stable Video Diffusion 模型，同樣可以通過文本或圖像生成高質量的視頻。

Stable Video Diffusion 介紹： https://stability.ai/news/stable-video-diffusion-open-ai-video-model

Stable Video Diffusion （下面簡稱 SVD）之所以這么受關注，一方面是因為它是開源模型，大家可以免費使用；另一方面則是它的生成效果非常好，下面是幾個用 SVD 將圖像轉為動圖的例子，視頻清晰度很高，畫面也很穩(wěn)定，整體表現并不亞于目前最火的 Runway。

來源： https://twitter.com/i/status/1727046123742007455

來源： https://twitter.com/i/status/1727085648014917688

來源： https://twitter.com/i/status/1729009760677044628

SVD 的功能雖然強大，也可以部署到本地，但是對配置的有要求，如果想在本地生成清晰的視頻，至少要 16G 的顯存，這對我們普通用戶來說門檻還是比較高的。但開源模型的好處就是一旦出現了，總會有大神為我們鋪好道路，讓高大上的工具變得觸手可及。SVD 推出到現在不過一個星期，就已經出現了好幾種免費使用方式，這里分享 2 個比較可靠的在線工具給大家：

① Replicate

鏈接直達： stability-ai/stable-video-diffusion – Run with an API on Replicate

這是 Stability AI 官方部署的線上試用頁面，可以將用戶上傳的圖像轉為視頻，支持調整視頻幀數、動態(tài)強度、視頻畫幅、幀率等參數。

② Stable-Video-Diffusion.com

鏈接直達： https://huggingface.co/spaces/multimodalart/stable-video-diffusion

這是第一個專門圍繞 SVD 構建的網站，上傳圖像就能生成視頻。生成效果同樣不錯，但人多的時候需要排隊，使用時記得過一兩分鐘就刷新一下界面，看看視頻是否完成。

相關推薦：

三、Pika

最后再來看一下 Pika ，今年 7 月份的時候給大家介紹過 Pika 了，它是繼 Runway 之后又一款比較受關注的 AI 視頻生成工具，支持文生圖和圖生圖，被稱為“視頻版 Midjourney”。目前它的服務依舊托管在 Discord 中，新用戶可以免費體驗。

Pika 官網直達： https://www.pika.art/

Pika 生成的視頻

過去的幾個月 Pika 也更新了不少功能，包括支持控制動態(tài)強度和鏡頭運動方式，支持調節(jié)視頻畫幅和幀率，可以用反向提示詞控制視頻內容，以及用帶文字或 logo 的墊圖來引導視頻的生成，總體來說和 Runway 非常類似。

視頻來源： https://twitter.com/i/status/1706028424979239249

昨天，Pika 官方發(fā)布了 Pika 1.0，支持根據文本生成 3D 動畫、動漫、卡通和電影風格的視頻，質量非常穩(wěn)定，并且還支持調整視頻細節(jié)，比如修改畫幅比例，給人物換裝，在畫面局部生成元素等，用戶注冊后可以免費體驗。感覺 Pika 也是在努力探索一條差異化的發(fā)展道路，避免與 Runway 的功能上完全重合。

好啦以上就是近期 AI 視頻的發(fā)展動向，大家感興趣的話可以去體驗一下它們的生成效果。喜歡本期內容的話記得點贊收藏支持一波，之后會繼續(xù)為大家?guī)砀?AI 繪畫干貨知識~ 也歡迎大家掃描下方的二維碼加入“優(yōu)設 AI 繪畫交流群”，和我及其他 設計師 一起交流學習 AI 知識。

另外，我最新制作的《AI 繪畫入門完全指南》已經上線，這是針對零基礎人群的 AI 繪畫入門課程，可以幫你快速掌握目前最熱門的 2 款 AI 繪畫工具 Midjourney 和 Stable Diffusion，說不定之后你也可以用它們結合這些 AI 視頻工具，探索出更多有趣的 AI 玩法。

課程鏈接： 零基礎 AI 繪畫入門完全指南 (uisdc.com) （錄播+課程群輔導）

推薦閱讀：