論PS的功力,英偉達的AI這次誰也不服

量子位發表於2018-04-25
問耕 發自 凹非寺
量子位 出品 | 公眾號 QbitAI

640?wx_fmt=jpeg&wxfrom=5&wx_lazy=1

在修圖這件事上,Photoshop有著崇高的地位。

前一陣子,流傳過這樣一個段子:“甲方不要PS!讓我們用Photoshop做!”足以說明開頭的結論。

然而,Photoshop不一定是最好的選擇~

這次英偉達,就搞出了一個新AI,擁有技驚四座的P圖本領。

比方,給你這樣一張圖。

640?wx_fmt=png&wxfrom=5&wx_lazy=1

嗯,對,就是這樣,畫面嚴重缺失。請用AI把這張圖修復一下,P得要看起來像原圖一樣真實。

難不難?這畫面上是啥都不一定能看清。

普通的AI也就能自動修補成下面這樣或那樣。

640?wx_fmt=png

英偉達的AI呢?可以P成這樣:

640?wx_fmt=png

對比下原圖。

640?wx_fmt=png

再來一個,還是同樣畫面確缺失嚴重。

640?wx_fmt=png

普通的AI也就能自動修補成下面這樣或那樣。

640?wx_fmt=png

英偉達的AI,可以P成這樣:

640?wx_fmt=png

再對比下原圖。

640?wx_fmt=png

英偉達的AI是不是更贊?

但,這個技術有什麼用?

其實與大段大段的補全缺失畫面相比,快速且優秀的進行區域性P圖,才是這個技術真正發揮實力的地方。

靜態展示不過癮,動態展示才更令人驚歎。

比如下面這個動圖,把左圖中的人、線、紅旗、石頭、棍子都P掉,應該怎麼做?很簡單,就是直接塗抹掉,然後AI就自動修復了。

640?wx_fmt=gif

640?wx_fmt=gif

還比如這樣。

640?wx_fmt=gif

其實這個AI的本事,就是能在一片空白之中,更好的填補上缺失的內容。

極端情況,比方處理人臉時候,眼睛被遮蔽了。

英偉達的AI就能重新補上一雙眼睛,當然不可能是原來那個人的眼睛,但是至少能彌補的也算相對完美吧~

640?wx_fmt=gif

640?wx_fmt=gif

以及,對於也能讓頭髮更濃密。

640?wx_fmt=gif

也能讓髮際線更高~

640?wx_fmt=gif

英偉達的新AI是真麼做到的?

答案就在這家公司新發布的論文裡。這篇論文標題:Image Inpainting for Irregular Holes Using Partial Convolutions 。

640?wx_fmt=png

英偉達的研究團隊提出了一種新的模型,使用部分卷積的方法,其中卷積被掩蔽,並且僅基於有效畫素進行重新歸一化等處理。

論文中,還與現有其他方法進行了對比,有很多公式。

比如這種。

640?wx_fmt=png

還有這種。

640?wx_fmt=png

詳細的方法和原理,可以前往閱讀論文,地址:

https://arxiv.org/abs/1804.07723

總而言之就是一句話:我不是針對誰,在座的都是……

最後順便提一下,這篇論文的一作Guilin Liu,在加入英偉達之前,還曾在Adobe Research實習過。

Adobe,就是搞出Photoshop(和一堆其他軟體)的那家公司~

640?wx_fmt=gif

作者系網易新聞·網易號“各有態度”簽約作者


活動報名

640?wx_fmt=jpeg

加入社群

量子位AI社群16群開始招募啦,歡迎對AI感興趣的同學,加小助手微信qbitbot6入群;


此外,量子位專業細分群(自動駕駛、CV、NLP、機器學習等)正在招募,面向正在從事相關領域的工程師及研究人員。


進群請加小助手微訊號qbitbot6,並務必備註相應群的關鍵詞~通過稽核後我們將邀請進群。(專業群稽核較嚴,敬請諒解)

誠摯招聘

量子位正在招募編輯/記者,工作地點在北京中關村。期待有才氣、有熱情的同學加入我們!相關細節,請在量子位公眾號(QbitAI)對話介面,回覆“招聘”兩個字。

640?wx_fmt=jpeg

量子位 QbitAI · 頭條號簽約作者

վ'ᴗ' ի 追蹤AI技術和產品新動態


相關文章