Pika推出音畫同步新功能一天後，翻車影片來了

机器之心發表於2024-03-11
原文網址 : https://www.jiqizhixin.com/articles/2024-03-11-13
Pika 的音效新功能「Sound Effects」，有大大的驚喜，也有小小的「驚嚇」。

Sora 的出現讓文生影片模型及應用火了起來。不過，此類模型生成的影片大多數都是無聲的。因此，人們開始探索為 AI 生成的影片「配音」。

這一領域的代表有 AI 語音克隆初創公司 ElevenLab，此前該公司為 Sora 的演示影片生成配音，音效與影片畫面幾乎沒有違和感。Pika推出音畫同步新功能一天後，翻車影片來了
現在，曾經引爆了 AI 圈的影片生成初創公司 Pika 終於有了新動作 —— 推出 Sound Effects，可以為 Pika 生成的影片無縫加音效了。

Pika 生成音效的方式有兩種：一種是給出 prompt，描述你想要聽到的聲音；一種是直接根據影片內容自動生成聲音。
圖片
至於音效與影片內容的匹配效果如何？我們先一睹為快。Pika推出音畫同步新功能一天後，翻車影片來了
不過，Pika 的 Sound Effects 功能只對超級合作者（Super Collaborator）和 Pro 使用者開放測試。普通使用者只能再等等了。
圖片
目前，Pika 官方放出了許多 Demo。Pika推出音畫同步新功能一天後，翻車影片來了
體驗地址：https://pika.art/

例如滋滋啦啦的烤肉聲音，還能隱約看到烤肉時冒出的煙霧，高畫質的畫面配上逼真的音效，讓人頓時感覺焦酥，鮮鹹，麻辣湧入舌尖：Pika推出音畫同步新功能一天後，翻車影片來了
如果你想換個聲音，也沒問題，點選影片下方的 Redo 按鈕，在出現的對話方塊中，輸入你想要的音訊描述就可以了：
圖片
小青蛙趴在荷葉上呱呱的叫，如果你仔細聆聽，還能聽見遠處的蟬鳴聲（不過生成的影片看起來缺陷很明顯，例如荷葉是紅色的，青蛙腹部有腿）：Pika推出音畫同步新功能一天後，翻車影片來了煙花在空中綻放，綻放瞬間發出響亮的爆竹聲，點卡的很準： Pika推出音畫同步新功能一天後，翻車影片來了
以上只是官方示例，生成的音訊效果到底如何，我們還得看看第一波體驗使用者的真實感受。

第一批試用體驗出爐：有驚喜，也有翻車

在 Pika 推出 Sound Effects 功能之後，第一批試用使用者已經曬出了他們加上音效的 AI 影片。

比如使用者 @TomLikesRobots 生成的雨中人物影片，他表示音效似乎與影片非常匹配，增添了很多氛圍感。
圖片Pika推出音畫同步新功能一天後，翻車影片來了比如使用者 @RetropunkAI 生成的兔子大片，生成的音效非常有趣。 Pika推出音畫同步新功能一天後，翻車影片來了
比如使用者 @AiFreak_tool，為生成的影片新增了不同的音效。
圖片Pika推出音畫同步新功能一天後，翻車影片來了
當然，Sound Effects 生成的音效並不總是能夠契合影片主題和畫面，比如下面這個示例。
圖片Pika推出音畫同步新功能一天後，翻車影片來了
圖源：@TomLikesRobots

還有使用者 @DavidmComfort，他表示生成音效有時會驢頭不對馬嘴，但畢竟 beta 階段，情有可原。
圖片Pika推出音畫同步新功能一天後，翻車影片來了
雖然偶有翻車，但更多人還是期待 Pika 可以趕緊開放 API。
圖片

相關文章