前言

目前多數生成式AI多半使用電腦進行操作,包AI影片生成器。而生成AI新創公司Runway發現目前利用手機拍攝影片族群為大宗,推出了其名「Gen-1」的影片轉影片生成式 AI 模型手機 App,使用者可以直接利用手機製作出各種有趣風格的影片。

目前 Gen-1 僅限於IOS用戶使用,本文就來帶大家好好認識一下Gen-1的功能。

Gen-1 為首個在手機裝置應用的生成式AI影片程式/Runway

Runway Gen-1 介紹

Runway Gen-1 讓使用者基於文字、圖像或影片產生特定風格或效果的影片,例如選擇套用特定美學主題,AI便能自動產生水彩畫、摺紙、素描風格等影片。而Gen-1 會生成四個預覽給使用者,一旦使用者選擇了最喜歡的一款風格影片,AI就會開始製作。

雖然Gen-1有點類似於風格轉移工具,卻與套用特殊濾鏡有不同風格,Gen-1 並不是直接將濾鏡套入影片進行加工,而是另外產生全新一支風格影片。儘管遠遠比不上專業動畫軟體產出的特效,但對想快速製作新奇有趣影片的使用者,Gen-1 算很容易上手又便利。

最重要的是,使用者可以直接使用手機錄影,立即用 Gen-1 轉成 AI 影片,展現隨錄隨轉的方便性。


自 2018 年推出以來,Runway 持續開發了各種 AI 的影片編輯應用程式。Runway 在其基於網絡的影片編輯器中擁有各種不同功能的工具,例如:幀插值、背景去除、模糊效果、清理或清除圖像、刪除音頻和運動跟踪等。這些AI工具幫助了電影或電視工作室減少了編輯和製作影片所花費的時間。

像是電影《Everything Everywhere All at Once》背後的視覺效果團隊就是使用 Runway 的技術來協助創建電影中的場景,其中一幕就是 Evelyn(楊紫瓊飾)和 Joy(Stephanie Hsu 飾)在一個多元宇宙中,變成了移動岩石。


圖片/Amazon


外國網友實測分享

根據國外網路媒體 TechCrunch+ 實測分享,使用了「The Office US」的片段,輸入的文字提示「realistic puppet」(真實木偶劇),來產出AI動畫:


又換一個文字提示,這次改輸入「3D animation」(3D動畫),產出的AI影片結果還不錯:


這次換國外網路媒體 theverge 進行測試,輸入另外一個文字提示,並應用了「paper and ink」(紙張和墨水)的風格過濾器進行倫敦聖保羅大教堂的AI影片生成:

theverge 表示,儘管呈現的效果並沒有特別出色,但它非常容易製作,相信如果是更有經驗和創造力的人,一定可以產出壯觀的影片。

Gen-1 限制與使用者計畫

而自然地Gen-1 與任何 AI 生成器一樣,產出的結果不一定都是完美,部分產出的AI影片看起來扭曲或怪異。隨著技術的發展與進步,AI影片生成器可能對使用者來說具有價值,像是對於內容創建者可以為他們的社群媒體貼文增添一點趣味。

值得提到的是,Gen-1 還一個限制,使用者不能輸入超過 5 秒畫面、且不能產生裸露內容,至於受版權保護作品也無法輸入且有某些被禁止的提示。例如,。提出製作「吉卜力工作室風格」影片的文字提示則被Gen-1 拒絕了。基本上 AI 影片全在雲端完成,每支影片約需要2至3分鐘。

使用者計畫

如果使用者想要使用Gen-1免費版,則有 525 個積分限制,而且只能上傳時長為 5 秒的影片,影片的每一秒將使用 14 個積分。

而有兩個高級計劃:標準版(每年 143.99 美元)和專業版(每年 344.99 美元)。標準計劃為您提供 625 個積分/月和其他高級功能,例如提供:1080p 影片、無限項目等;Pro 計劃每月提供 2,250 個積分和 Runway 所有多達30種的AI工具。



總結

本文介紹了 Runway 推出在手機上的生成式 AI,讓使用者可以直接利用手機製作出各種有趣風格的影片。使用者可以基於文字、圖像或影片產生特定風格或效果的影片,對想快速製作新奇有趣影片的使用者來說,Gen-1 算很容易上手又便利。使用者可以選擇免費版或是標準版、專業版,不同的版本會有不同的積分限制和高級功能,使用者可以依據自己的需求進行選擇。

AI技術持續進步與突破,改變我們的生活與工作模式。而在 Runway 發布 Gen-1(於2月推出)一個月後,Runway 推出了其

Gen-2

型號。而 Gen-2 可以說是文本到圖像模型 Stable Diffusion 和 DALL-E 的一個進步,它是一個文本到視頻生成器,使用者就能夠從頭開始生成影片。Runway表示 Gen-2 將很快與 Runway 的其他 AI 工具一起提供給大家測試。