Nvidia最新的AI圖像修補術,秒殺PS!

Photoshop中的仿製圖章或修補工具,可以幫助我們修復照片上的瑕疵。比如,現在你抓到一隻社會人必備的小豬佩奇,但發現豬豬女孩的衣服上有污點:

便可以打開ps,快速的用修復工具去除一下:

這種簡單的單色圖像,修復起來還是挺方便的,若要換成實景或人像,就要耗費不少心力了!

而本周,Nvidia(英偉達)在計算機視覺領域的人工智慧技術取得了新突破:Image Inpainting for Irregular Holes Using Partial Convolutions(基於部分卷積層的不規則孔洞圖像修復術),可以瞬間「修補」照片中被刪除的部分!不過不是原貌恢復,而是加入了AI「自己的理解」。例如,當你覺得下圖中的那座橋有些礙眼,想進行擦除:

擦除之後,圖像會立刻按著AI理解的樣子,自動修補:

即便是面部五官,也可以輕鬆修復(甚至給你化個妝,噗):

就算把人物圖像擦成左圖那副鬼樣子,修補的效果也毫無違和感:

更多修復示例,可點擊視頻觀看:

https://www.zhihu.com/video/972858087946747904

Nvidia的研究人員表示:「此前,基於機器學習的圖像處理主要集中在圖像中心附近的矩形區域,且處理後通常還需要昂貴的人工後期。所以這次研究的目標,就是創建一個可以處理不規則孔洞的圖像修復模型,並對圖像語義進行預測,在不需要任何人工後期的情況下生成可與原圖順暢銜接的像素修補。」白皮書詳情:https://arxiv.org/pdf/1804.07723.pdf

據悉,Nvidia是首個成功訓練神經網路對不規則圖像孔洞進行修復的研發團隊。本質上說,這項AI技術的關鍵是基於深層神經網路創建蒙版(mask)和部分卷積預測(partial convolutional prediction)。如下圖所示,研發團隊共創建了多達上萬個不同類型的不規則形狀蒙版,用來訓練部分卷積網路。

Nvidia的AI項目,在計算機視覺領域帶給人們的驚艷可不止這一次!之前其便用AI造了一批假明星(查看)。

如此看來,如何辨別「AI假圖」和真實圖像,日後倒是個可以琢磨的方向,例如通過數字簽名或用計算機對圖像進行像素評估等。

?

WTT資訊-最新科技資訊,實時網安信息?

www.wttech.org圖標

歡迎關注我們:

@W-Pwn


推薦閱讀:

怎麼把握好後期的度,覺得已經不錯的片子(也可以是別人的)再拿來Nik一下總會覺得更美?
為什麼Photoshop打開後一直顯示抓手工具,切換其它工具仍然顯示抓手工具?
ps動作,中文和英文如何可以轉換?
如何評價以下人像(妹子)攝影,並做出有針對性的改進和提高?
請問這種灰灰的,朦朧的超現實感覺是怎麼後期的?

TAG:人工智慧 | AdobePhotoshop | 圖片處理 |