跳舞也比不過AI?谷歌AI已可以自行freestyle

大資料文摘發表於2018-12-27

近日,谷歌藝術與文化部的Damien Henry與英國舞蹈編導Wayne McGregor合作,共同研發了一種能夠預測特定風格舞蹈動作的人工智慧

這個工具可以根據數百小時的視訊片段生成自創的舞蹈編排,所有的資料都來自於Wayne McGregor自己以及他公司的十位舞者的檔案。

在觀看了他們的舞蹈動作視訊後,AI可以抓取出這些舞蹈家的個人風格,並創造類似風格的獨舞編排。

跳舞也比不過AI?谷歌AI已可以自行freestyle

McGregor對科學和技術並不是一時興起,他擁有普利茅斯大學的名譽科學博士學位。他說,這個新專案是在回顧他25年來的表演視訊時想到的,他想知道技術能否幫助保持表演的新鮮感。

跳舞也比不過AI?谷歌AI已可以自行freestyle

McGregor 說到:“我想用一種有趣的方式來利用這個龐大的工作檔案,所以我問Damien是否可以用它來產生一些新的東西。所有的這一切最後都歸結到了編排中的一個至關重要的問題:如何不斷創造新的內容?”

人工智慧已經能夠預測很多事情,比如你將在手機上輸入的下一個單詞,或者在上傳到社交媒體的圖片中識別你的身份。但是,預測手勢對人工智慧來說是很棘手的。

 Henry說,他在科學網站distill.pub上的一篇帖子中得到了靈感,該帖子使用神經網路,根據你在前一封信中的筆跡去預測下一封信的筆跡形式。他提出了一個類似的演算法,可以對給定的運動進行預測。通過視訊捕捉舞蹈演員的姿勢,然後使用工具提供接下來最有可能的幾個舞蹈片段,並在螢幕上實時顯示它們。

這項技術錄入了McGregor的檔案和他的舞蹈演員的錄製視訊。Henry認為,在某種程度上,人工智慧學會了如何跳舞,但它的舞蹈風格與Wayne McGregor十分相似。

該工具的工作原理是利用網路攝像機獲取視訊輸入,並通過繪製不同身體部位之間的點,提取舞蹈演員做出特定姿勢的“骨架”。它將這個輸入至三種不同的演算法來猜測下一個舞蹈姿勢可能是什麼,這需要考慮到特定舞者的個人風格,也要考慮到公司其他九個舞者的風格。

跳舞也比不過AI?谷歌AI已可以自行freestyle

這總共產生了30個潛在的編排序列,目前持續時間約10秒,並使用類似的"骨架" 視覺顯示在計算機螢幕上,McGregor會選擇他想用哪一個序列。Henry說:“接下來,無論舞蹈演員跳什麼,都可以再次錄製,重新輸入機器。”

由AI工具讀取的舞者"骨架"

跳舞也比不過AI?谷歌AI已可以自行freestyle

對於McGregor來說, 這項技術最引人入勝的一個方面是, 它可以學習和再現舞者的特殊風格。

他說:“我之所以選擇某些舞者,是因為他們的身體特徵和特殊的運動方式。”Damien的發明的天才之處在於,它抓住了表演的精髓。

實際上,演算法在編舞中已經被使用了幾十年。

早在1964年,在匹茲堡大學,Jeanne Beaman和Paul Le Vasseur就用計算機從不同的時間變化、空間方向和他們輸入的運動型別中產生隨機的舞蹈序列。本世紀初,編導們使用了一種叫"choreograph" 的軟體,該軟體是一種排序工具,可以讓編導在時間軸上設定數字變體, 在表演過程中作為舞者的提示表。由於舞臺周圍安裝了感測器, 它能夠實時更新舞者的動作。

但是人工智慧在舞蹈和創造力方面有侷限性。Michael Klien是杜克大學舞蹈專案的編導,也是ChoreoGraph的熟練使用者。他的軟體作品在倫敦皇家歌劇院展出,但他解釋說,他很快就厭倦了這一過程,並在2002年放棄了系統,轉而直接與他的舞蹈演員合作。

他表示:“我們不斷在系統中加入更多的演算法,使其更加智慧,我想實現人工智慧編排結構。但我意識到,人工智慧不能作為開發舞蹈的中堅力量。我們對智慧的假設構建出我們的人工智慧機器,這也意味著我們不會突破我們的想象力極限。”

AI工具預測舞蹈演員下一步動作的示例

跳舞也比不過AI?谷歌AI已可以自行freestyle

Henry表示,谷歌的工具無法發明出以前從未見過的動作。像所有的人工智慧一樣,它通過“插值”來構建結果——也就是說,它預測的是在之前所有學到的事情中最有可能發生的事情。

“我們不是要用AI取代編舞這個角色,”他說。“但是,AI可以以一種非常有效和快速的方式進行創造,這樣創造的過程就會永不停止。真正的創造部分將來自Wayne對這些舞蹈序列的選擇與使用。”

當然,AI編舞也不是完全不具備創造力。該技術可以畫出一張它所識別的不同舞蹈動作的“地圖”,並且推薦特定的動作序列。Henry解釋說, 它在動作之間轉換的方式可能並未在訓練資料中出現過。這意味著它必須有潛力想出以前從未做過的動作。McGregor 表示,“我總是對一件我從未見過的東西感興趣”。

這項技術也可以設定為提供一個混合兩個舞者風格的編排舞蹈序列。當公司試用時這一功能時,這引起觀看者哈哈大笑,你想象一下你以別人的風格在螢幕上移動,你就能體會到這種樂趣了。

比如說,在McGregor的檔案中插入巴西桑巴舞的錄影,會發生什麼?結果將會是一場以前可能從未見過的混合舞。但是McGregor說,他並不擔心AI會編排出四不像的舞蹈。“接下來如何選擇還是我來決定的。我是整個舞蹈的源頭。我更把這看作一個創造的機會,我很喜歡這種不確定的感覺,像在玩遊戲一樣。”

McGregor希望這一工具將來可以用於實時工作,每個舞蹈演員都有自己的展示螢幕,並在舞臺上可以再現演算法傳遞出的舞蹈序列。但是一些技術細節仍然需要整理——比如,該程式能否同時支援十部手機連線,能否將舞蹈序列同時顯示在螢幕上?

McGregor對此很有信心“我們將會實現實時舞蹈編排,這一定會很吸引人。”

相關報導:https://www.wired.co.uk/article/google-ai-wayne-mcgregor-dance-choreography

相關文章