AI 收藏夾 Vol.004:Waifu Lab 火了,AI 是如何創作的?

Zilliz 發表於 2022-01-20
人工智慧

文章

0 1

AI 如何畫出虛擬老婆的?

AI 收藏夾 Vol.004:Waifu Lab 火了,AI 是如何創作的?

最近大火的 Waifu Labs 專案使用生成對抗網路方法,訓練 AI 創作「虛擬老婆」。

這篇文章[1]解剖 AI 學習的步驟,我們可以看到一張二次元面孔是如何在一片混沌中生成的。生成對抗網路簡稱 GAN,是非監督式學習的一種方法,你可以把它想象成一對為了學習而相互博弈的 AI:一個 AI 學習如何繪畫;另一個 AI 學習如何區分由人工智慧製作的畫和由人類藝術家製作的畫作。

通過隔離控制某些特徵向量,對這些座標進行編目,還可以在人物之間實現有趣的變形 。

0 2

當 AI 遇見美食

AI 收藏夾 Vol.004:Waifu Lab 火了,AI 是如何創作的?

索尼自 2018 年開始探索人工智慧與烹飪之間的連結。日前,索尼開發的 AI 系統已支援將大量的食物資料整合處理後交付到廚師手中,協助廚師在靈活地搭配食材。此外,索尼還在開發能夠靈巧快速地操作各種食品和烹飪器具的機器人,以輔助廚師烹飪和裝盤。為了實現這些目標,索尼與整個行業的組織合作,從廚師、餐館到大學、科技公司和食品供應商。我們可以在索尼官網[2]上進一步閱讀相關論文並觀看概念視訊。

0 3

Meta AI 讓兒童手繪「活」起來

AI 收藏夾 Vol.004:Waifu Lab 火了,AI 是如何創作的?

兒童會畫出千奇百怪的身體形狀,有時候沒有完整的頭,有時候手臂又會從眼睛的地方伸出來……不同的孩子又會畫出不一樣的世界。AI 如何克服重重挑戰,識別兒童繪畫?Meta 通過四個步驟來完成從繪畫到動畫的轉變:目標檢測識別人形;使用角色 mask 從場景中提取人形;通過 rigging 為動畫做準備;使用 3D 動作捕捉製作 3D 人形動畫[3.1]。你也可以在這裡線上試玩[3.2]。

AI 收藏夾 Vol.004:Waifu Lab 火了,AI 是如何創作的?

0 4

AI 軟體輔助識別結直腸病變

AI 收藏夾 Vol.004:Waifu Lab 火了,AI 是如何創作的?

位元組跳動旗下醫療品牌「小荷健康」研發了一款結腸鏡 AI 輔助診斷軟體,可利用人工智慧技術,輔助臨床醫生實時發現、鑑別結直腸癌症病變。

與其他癌症相比,結直腸癌相對可防可控。而可防可控的關鍵在於早預防、早篩檢、早治療,結腸鏡檢查便是最主要的早篩檢手段之一。

0 5

Jeff Dean:機器學習 2021 年度總結與研究趨勢

AI 收藏夾 Vol.004:Waifu Lab 火了,AI 是如何創作的?

谷歌 AI 掌門人 Jeff Dean 發表萬字長文年度總結。在總結中,重點介紹機器學習五大趨勢:

  • 能力更強的通用型機器學習模型
  • 持續改進機器學習的效率
  • 個人和社會視角下,機器學習的益處
  • 科學、健康和可持續發展方面,機器學習的效益
  • 倫理上,機器學習公平和公正議題

工具

0 1

AI 自動補全程式碼神器

AI 收藏夾 Vol.004:Waifu Lab 火了,AI 是如何創作的?

🌟 功能:

根據已寫出的上下文,自動生成匹配的程式碼,可以將簡單重複的程式碼編寫部分自動化。

👀 亮點:

  • 經過數十億行公共程式碼的訓練,實測正確率較高,按 tab 鍵自動補全確實很爽
  • 還可以用於協助軟體測試,匯入一個軟體測試包,其餘測試程式碼自動補全

👉 地址:

https://copilot.github.com/

**
**

0 2

索尼 CSL 音樂實驗室研發的創意原型和音訊製作工具

AI 收藏夾 Vol.004:Waifu Lab 火了,AI 是如何創作的?

🌟 創意功能:

  • DrumNet 通過無監督學習的方式實現基於現有的音樂旋律生成鼓點節奏
  • BassNet 基於現有音樂旋律生成低音,並且在音樂播放時可以隨時調整和控制產生音符的密度、清晰度和音色
  • Flow Machines 可以生成一段包含和絃、低音和完整旋律的音軌樣式
  • 在把實際演奏的鋼琴旋律進行數字化處理時,常常會遇到一些音符的缺失,這時就可以進行“修復”,甚至還可以直接去“續寫”或者從頭建立一段新的旋律
  • NOTONO 是一個將聲音視覺化的合成器
  • DrumGAN 生成各種各樣的鼓聲

🔧 用於音訊處理和製作混音/母帶的高階工具:

  • Profile EQ 類似圖形編輯器中的“自動對比”功能,是一個將音訊直觀對比的自適應均衡器
  • Resonance EQ 類似“調節影像飽和度”功能,能平滑音訊,去掉雜音,或放大共鳴,強調諧波豐富旋律等
  • Multiband Phase 自動識別和修復相位相關問題
  • XSpecMatch 是實時的音訊匹配均衡器

👉 專案地址:

https://cslmusicteam.sony.fr/...

0 3

限時你畫我猜小遊戲

AI 收藏夾 Vol.004:Waifu Lab 火了,AI 是如何創作的?

🌟 玩法:

神經網路能學會辨識塗鴉嗎?在這個小遊戲裡,使用者在 20 秒內根據命題畫畫,神經網路試圖猜測你在畫什麼。使用者玩得越多,它就會學得越多,是一個有趣的機器學習應用案例。

👉 玩耍地址:

https://quickdraw.withgoogle....

🖌️ 塗鴉資料集:

https://quickdraw.withgoogle....

參考資料:

[1] Waifu Labs:https://waifulabs.com/blog/ai...

[2] 索尼的 AI 探索:https://ai.sony/projects/gast...

[3.1] Meta AI 讓兒童畫活起來:https://ai.facebook.com/blog/...

[3.2] 試玩地址:https://sketch.metademolab.com/

[4] AI 腸鏡輔助檢查:http://www.chinanews.com.cn/c...

[5] Jeff Dean 的年度總結:https://ai.googleblog.com/202...


Zilliz 以重新定義資料科學為願景,致力於打造一家全球領先的開源技術創新公司,並通過開源和雲原生解決方案為企業解鎖非結構化資料的隱藏價值。

Zilliz 構建了 Milvus 向量資料庫,以加快下一代資料平臺的發展。Milvus 資料庫是 LF AI & Data 基金會的畢業專案,能夠管理大量非結構化資料集,在新藥發現、推薦系統、聊天機器人等方面具有廣泛的應用。