機器之能報導
編輯:山茶花
以大模型、AIGC為代表的人工智慧浪潮已經在悄然改變著我們生活及工作方式,但絕大部分人依然不知道該如何使用。
因此,我們推出了「AI在用」專欄,透過直觀、有趣且簡潔的人工智慧使用案例,來具體介紹AI使用方法,並激發大家思考。
我們也歡迎讀者投稿親自實踐的創新型用例。
Pika 又又又上新了!
近日,Pika 在 X 上宣佈,新推出「風格生成」功能,並向所有人開放。
在其宣傳影片中,使用者可以在不改變畫面的情況下隨意切換相框中小狗的風格,黑白風、動漫風、自然風等均可一鍵實現。網友評價稱「Pika 的風格生成功能將徹底改變遊戲規則」。
X 網友同一句 Prompt 擴充套件出四種不同風格的兔子。
也有網友使用 Pika 的「風格生成」功能、udio 的音樂生成功能製作了一則動畫短片。
影片地址:
https://x.com/ponzponz15/status/1784041053835936052
Pika 是一款 AI 影片生成應用,與 Runway 並稱為 AI 文生影片「雙子星」。2023 年 11 月 29 日 Pika1.0 正式釋出,歷經多次更新,目前已經具備文字和影像生成影片、編輯更改影片、更改影片寬高比、延長畫面 4 秒時長、生成音效、口型同步等功能。
4 月 27 日,Pika 又上線了「一鍵風格生成」功能。目前,Pika 已更新 7 種風格,包括動漫、Moody、3D、水彩、自然、粘土動畫、黑白等。玩法也非常簡單。
第一步:準備工作。登陸 Pika 官網(https://pika.art/home),點選「Try Pika」,使用谷歌郵箱或 Discord 賬號登入。
第二步:變換風格並生成。在操作介面下方的輸入框中輸入 Prompt,然後點選「Style」,任意選擇一種風格,Prompt 也將隨之改變。如果想生成「有聲」短片,使用者則可以開啟「Sound effects」按鈕。
例如,筆者輸入「A kitten on the grass」(草地上一隻小貓),並選擇「Claymation」(粘土動畫)風格,隨即 Prompt 自動新增了「Claymation, stop motion」。最後點選生成按鈕,靜待一分鐘,即可生成一段 3 秒影片。
最終生成的效果如下:
影片地址:https://mp.weixin.qq.com/s/Np2V3umOKYYhBCbe3GByXA
如果使用者還想嘗試不同的風格,只需在生成的影片下方點選「Edit」,然後選擇「Style」,從中挑選任一風格即可。
例如筆者想把生成的小貓影片變換成 3D 風格,最終生成的效果如下:
除了快速迭代產品,Pika 也很會「搞事情」。兩週前,Pika 聯合知名 AI 語音克隆公司 ElevenLabs 發起了一場名為「FilmFAST 」AI 電影比賽,參賽者需要在 72 小時內使用 ElevenLabs 和 Pika 製作一部小短片,總冠軍將獲得 2000 美元大獎。
經過 10 天的評選,Pika 首屆「AI 奧斯卡」大賽落下帷幕。看完獲獎作品,我們想起馬斯克說過的一句話,「AI movies next year」。
影片地址:https://mp.weixin.qq.com/s/Np2V3umOKYYhBCbe3GByXA
1.總冠軍:《Love Bytes》
影片地址:https://mp.weixin.qq.com/s/Np2V3umOKYYhBCbe3GByXA
這部短片由 @LeMoonSynth 和 @Ethereal_Gwirl 製作,畫面充滿賽博朋克感,總讓人想起老式玩具。
該短片講述了一個名叫 Mee 的機器人女孩,由於缺少一顆心,對自己的存在感到不滿,由此展開了一段尋找「心」的旅程。這個故事強調了自我接納以及理解自己本心的重要性。
2. 最佳聲音設計獎:《Celestial》
影片地址:https://mp.weixin.qq.com/s/Np2V3umOKYYhBCbe3GByXA
這部充滿濃濃日本動漫風的作品由 @IshanNahata 製作。
作者表示,所有鏡頭、聲音和畫外音均由人工智慧生成。配樂由葉夫亨・奧諾琴科(Yevhen Onoychenko)創作。
短片中的聲音設計確實驚豔:森林裡的鳥叫聲、原子彈爆炸的聲音、火箭升空的聲音,再加上低沉的女聲旁白以及配樂,讓人身臨其境。
3. 最佳實驗獎 :《Keep the change》
影片地址:https://mp.weixin.qq.com/s/Np2V3umOKYYhBCbe3GByXA
據短片作者 @next_on_now 介紹,這部短片使用了三種工具,Pika 處理影像生成影片動畫以及唇形同步,ElevenLabs 製作音效以及配音,Suno 則被用來製作配樂。
4. 最佳視覺效果獎:《Control Freaks》
影片地址:https://mp.weixin.qq.com/s/Np2V3umOKYYhBCbe3GByXA
這部具有皮克斯動畫風格的短片出自 @MeanOrangeCat 之手。快速流暢的剪輯、精美穩定的畫面、動感的配樂贏得不少網友的好評。
5. 最佳敘事獎:《Curtain Call 》
影片地址:https://mp.weixin.qq.com/s/Np2V3umOKYYhBCbe3GByXA
這部超現實短片由 @MinistryOvTrvth 和 @machine_mythos 製作完成。
人頭攢動的沙灘上,被刺傷的「尼古拉斯・凱奇」痛苦地呼救,但人們誤以為他在拍電影,紛紛拍照圍觀,最終尼古拉斯・凱奇在絕望中死去。在短片結尾中尼古拉斯・凱奇帶著血跡的簽名照被拍賣,諷刺感拉滿。正如作者所言,「The performance of a lifetime, or is it?」
別看這部短片只有三分鐘,但故事情節完整,配樂也相得益彰,只是畫面仍有瑕疵,尤其是 Pika 的口型同步功能還是會出 bug。
此外,Pika 還在 X 上放出了其他優秀的參賽作品。
《Endless Surprises》
影片地址:https://mp.weixin.qq.com/s/Np2V3umOKYYhBCbe3GByXA
這部動漫短片頗有《大魚海棠》的感覺,相比於前兩部作品,它的畫面穩定性更好。
作者 @panaviscope 詳細介紹了該短片的製作過程,「我用 ComfyUI 生成影像,並使用 Pika 對它們進行動畫製作。短片中的所有元素都是逐一動畫化的,然後在 Blender 中重新編輯。
短片製作過程中,有時使用綠色背景進行動畫製作效果好,但其他時候上下文背景可以提高 Pika 模型的效能。例如,為了讓魚能正常遊動,我使用了一個非常模糊和黑暗的街道背景,這很容易用 ComfyUI 的 “移除背景” 功能去除。
至於如何調整運動強度,我發現有時低設定就能達到所需的場景運動效果,但其他時候,高值更好。我會捕捉我需要的幾幀,然後減慢它們的速度,使用插值來確保流暢的結果。
對於聲音,我採用了配音工作室的方法:生成三四遍對話,將它們匯入 Ableton(我還在其中作曲),並整合了效果最好部分。Joanne 和 Keltham 是我的配音演員,我使用了較低的 “相似度” 值,以賦予模型一些創造性自由。
最終用 Adobe 的 After Effects 功能進行潤色,用 topazlabs 提高解析度。」
《The FLUFFATROO》
影片地址:https://mp.weixin.qq.com/s/Np2V3umOKYYhBCbe3GByXA
以後我們會透過新專欄帶來更多 AIGC 案例演示,也歡迎大家留言評論並給出改進建議。