“
大家注意：因?yàn)槲⑿抛罱指牧送扑蜋C(jī)制，經(jīng)常有小伙伴說(shuō)錯(cuò)過(guò)了之前被刪的文章，比如前陣子冒著風(fēng)險(xiǎn)寫(xiě)的全指南，再比如一些限時(shí)福利，錯(cuò)過(guò)了就是錯(cuò)過(guò)了。
所以建議大家加個(gè)星標(biāo)，就能第一時(shí)間收到推送。??
如果說(shuō)今年的 AI 大爆發(fā)是過(guò)去幾年的技術(shù)沉淀，終于從論文變成了封裝好的工具，繼而進(jìn)入到了咱們的視野里。
那再往后看，短期內(nèi)會(huì)是有試錯(cuò)能力的人或公司，開(kāi)始把 AIGC 應(yīng)用到自己的領(lǐng)域；長(zhǎng)期看會(huì)是 AIGC 內(nèi)容的大爆發(fā)。
前者，且看今年成都視聽(tīng)大會(huì)，國(guó)內(nèi)一眾互聯(lián)網(wǎng)公司都在大談特談 AIGC，仿佛誰(shuí)不擁抱 AI，誰(shuí)就會(huì)落伍一樣；
至于后者，那可就更好理解了，畢竟 AI 工具降低門(mén)檻是真的——
現(xiàn)在這個(gè)時(shí)間點(diǎn)看，有的 AI 能聊天，有的 AI 會(huì)作圖，還有的 AI 可以作曲、做視頻，先不說(shuō)未來(lái)一定會(huì)出現(xiàn)的集大成工具，如果現(xiàn)在就把這些不同領(lǐng)域的 AI 聚到一起呢？
推特上的一位國(guó)外小哥@ Nick St. Pierre 就這么搞了，在我們還在驚呼，「臥槽 AI 還能這么搞」的時(shí)候，他利用多種 AI 工具，制作一條接近 30 秒的視頻。
這樣的「大作」是怎么實(shí)現(xiàn)的呢？且往下看。
AI 全制作
正常去拍攝一條視頻應(yīng)該怎么搞，最簡(jiǎn)單的，我們需要先撰寫(xiě)視頻腳本，然后根據(jù)腳本去拍攝視頻，最后加上后期特效，把音樂(lè)加進(jìn)來(lái)。
國(guó)外這個(gè)小哥也是這么拆分任務(wù)的，不過(guò)其中編劇、導(dǎo)演、特效、配樂(lè)的活統(tǒng)統(tǒng)教給了 AI——
視頻腳本的任務(wù)交給了 ChatGPT，讓 ChatGPT 為一個(gè)主題是「一個(gè)男人坐在房間里」，風(fēng)格為「科技感」的視頻生成鏡頭。
光有視頻腳本，沒(méi)有畫(huà)面感可不行，所以這個(gè)小哥根據(jù)腳本，用 Midjourney 生成了一張圖片。
腳本有了，畫(huà)面也有了，接下來(lái)就該開(kāi)機(jī)實(shí)拍了，不過(guò)沙發(fā)好搞，圖片里的發(fā)光球體要怎么準(zhǔn)備呢？
反正后期都是交給 AI 生成，與其 DIY 個(gè)球，不如拿相似物品替代，瞅了一圈，小哥拿出了自己的衛(wèi)生紙。
按例圖簡(jiǎn)單找了角度，就在自己家里，用一部 iPhone 手機(jī)就拍出原始鏡頭。
有了原始鏡頭，就該搞后期特效了，畢竟你瞅上面這個(gè)視頻片段，和例圖里的科幻風(fēng)可沒(méi)半毛錢(qián)關(guān)系。
于是，小哥找來(lái)了 Runway 的 Gen-1 工具，拿例圖給原始鏡頭遷移了風(fēng)格：
等 3 個(gè)鏡頭全部制作完成，小哥用 Boomy 生成了一段符合心意的背景樂(lè)，近 30 秒的成片新鮮出爐。
這小小的短片，如果按傳統(tǒng)的制作流程，3 天時(shí)間都算很高效的了，而小哥說(shuō)在 AI 的幫助下，他只用了 3 個(gè)小時(shí)。。。
用 3 小時(shí)替代 3 天的工作量，說(shuō)起來(lái)很容易，但小哥一定忽略了學(xué)習(xí)使用 ChatGPT、Midjourney、Runway Gen-1、Boomy 的過(guò)程。
雖然用過(guò)的小伙伴肯定知道，上述工具只要會(huì)用打字、會(huì)用翻譯軟件就能搞定，但用起來(lái)容易，用好難。
ChatGPT 大家已經(jīng)不陌生了，下面就讓我們拿遷移視頻風(fēng)格，AI 制作視頻的 Runway Gen-1 舉例。
Runway Gen-1
看了上周文章的小伙伴肯定知道，Runway 上周發(fā)布了自家最新的 Gen-2 模型，但發(fā)布?xì)w發(fā)布，一方面是炫肌肉，一方面就是純純畫(huà)餅了。
何況在 Gen-2 發(fā)布的時(shí)候，Gen-1 還在內(nèi)測(cè)，但沒(méi)想到，隨著 Gen-2 發(fā)布，Gen-1 上周直接開(kāi)放使用了，而且給新注冊(cè)的用戶(hù)免費(fèi)體驗(yàn)的額度。
地址：https://runwayml.com
我們只需要在官網(wǎng)主頁(yè)右上角完成注冊(cè)。
登錄后會(huì)進(jìn)入我們自己的工作臺(tái)，新用戶(hù)有 400 積分，右側(cè)工具里就有「Video to Video」的選項(xiàng)。
點(diǎn)進(jìn)去，是一個(gè)上傳視頻的界面。
是的，不像剛剛發(fā)布還沒(méi)實(shí)裝的 Gen-2，Gen-1 還不能夠從 0 到 1 完整的創(chuàng)造視頻，這也是為啥前面那位小哥還需要拿手機(jī)實(shí)拍的原因。
至于 400 積分，我們可以在右上角看到時(shí)間額度，每用 Gen-1 生成一段視頻，會(huì)扣 14 積分，相當(dāng)于你能用這 400 積分生成 28 段視頻。
不過(guò)需要注意的是，每一段視頻不能超過(guò) 5 秒，Gen-1 剛剛開(kāi)放時(shí)還只是 3 秒，Runway 偷偷上調(diào)了額度。
至于需要我們提前準(zhǔn)備的？也就一份原始視頻了，這次我們是奔著體驗(yàn)來(lái)的，所以我從網(wǎng)上找了段小姐姐跳舞的視頻。
在視頻上傳后，在視頻預(yù)覽的右側(cè)，會(huì)有出現(xiàn)三種遷移風(fēng)格的選項(xiàng)，分別是圖片、預(yù)設(shè)風(fēng)格、提示詞：
提示詞那個(gè)我試了試，完全沒(méi)按我意思走，生成的更像是去年 AI 繪畫(huà)那種不可名狀的克蘇魯。。。
所以我這里重點(diǎn)展示一下圖片，Runway 里提供了不少可供我們選擇的 Demo，當(dāng)然，像圖片這種我們還能自己上傳。
在風(fēng)格選項(xiàng)下，是關(guān)于 AI 生成過(guò)程中的設(shè)置，基礎(chǔ)其實(shí)就風(fēng)格權(quán)重和種子兩項(xiàng)。
、
但展開(kāi)后，還有結(jié)構(gòu)一致性、幀一致性、影響前景、背景的選項(xiàng)，具體的大家可以看看 Runway 給出的介紹。
地址：https://help.runwayml.com/hc/en-us/articles/15161225169171
選擇好風(fēng)格，設(shè)置好參數(shù)后，就可以點(diǎn)擊生成了，等進(jìn)度條讀完，新風(fēng)格的視頻就做好了。
這是 Demo 里自帶的賽博朋克風(fēng)格圖片轉(zhuǎn)換后的視頻：
這是 Demo 里巖漿圖片轉(zhuǎn)換的視頻：
此外，我還拿 3D 轉(zhuǎn) 2D 的工具生成了圖片：
地址：https://huggingface.co/spaces/akhaliq/AnimeGANv2
這是轉(zhuǎn)換后的新視頻：
當(dāng)然，我也用 Stable Diffusion 的圖生圖試了試。
效果如下：
能看出來(lái) Gen-1 很努力的想把視頻里的小姐姐轉(zhuǎn)換成例圖里的樣子，但臉部效果確實(shí)一般，至少和小哥制作的視頻是很有差距的。
問(wèn)題出在了哪？以我拿兩個(gè)號(hào)測(cè)試的結(jié)果而言——
1、原視頻的鏡頭一定要穩(wěn)，像小姐姐跳舞這種，動(dòng)作細(xì)節(jié)一多，AI 處理效果就差。
2、原視頻里有人物時(shí)，不要有口罩之類(lèi)遮擋五官的地方，背景也最好干凈一下，換句話(huà)說(shuō)，不能給 Gen-1 太多自由發(fā)揮的空間。
3、例圖的風(fēng)格要明顯，尤其是色彩、光線(xiàn)等等，這個(gè)需要我們?cè)?AI 圖生圖時(shí)多下功夫了。
關(guān)于用 Gen-1 生成創(chuàng)意視頻，大家可以看看 B 站這個(gè)搬自油管的教程，還有內(nèi)測(cè)資格的 UP 主拿《中國(guó)奇譚》畫(huà)風(fēng)遷移狂飆的體驗(yàn)，相信你會(huì)有更好的理解。
結(jié)語(yǔ)
我們今天只是初體驗(yàn)了下 Gen-1，而按發(fā)布時(shí)的說(shuō)法，更給力的 Gen-2 會(huì)在這幾周內(nèi)實(shí)裝，有機(jī)會(huì)肯定要體驗(yàn)一下。
至于你說(shuō) AI 有沒(méi)有門(mén)檻？有的，至少如果我沒(méi)有自己用過(guò)，總會(huì)不由自主的去誤解當(dāng)前 AI 的能力，覺(jué)得它無(wú)所不能或一無(wú)是處。
實(shí)話(huà)實(shí)說(shuō)，單這個(gè) Gen-1 在會(huì)用的人手中（比如國(guó)外的小哥）和不會(huì)用的人手中（比如現(xiàn)在的我）是不一樣的。
不過(guò)可以肯定的是，AI 這玩意還遠(yuǎn)遠(yuǎn)沒(méi)有達(dá)到上限，當(dāng)未來(lái)的 AI 門(mén)檻更低，操作起來(lái)更傻瓜，AIGC 的大爆發(fā)是板上釘釘?shù)摹?/p>
而限制我們創(chuàng)作的，大概就是獨(dú)屬于人類(lèi)的想象力了。
所以先用起來(lái)，先上手的就會(huì)有先發(fā)優(yōu)勢(shì)，新的產(chǎn)品發(fā)布，新的動(dòng)態(tài)我每天都會(huì)在星球上不斷更新，這個(gè)其實(shí)也是上周就發(fā)在星球上了，對(duì) AI 感興趣的小伙伴可以來(lái)咱們星球看看。
聯(lián)系客服
