【我們為什麼挑選這篇文章】NVIDIA 用 AI 修復圖片的功能太強大,搞得其他用 AI 自動 P圖的功能很遜一樣。AI 深度學習的技術可以處理越來越大的毀損部位,特別是五官若是比例跑掉,P 圖等於沒 P ,可是 NVIDIA 像是英雄拯救地球一樣拯救所有爛圖。認真覺得 P 圖師地位受 AI 威脅。(責任編輯:鄧天心)
在修圖這件事上,Photoshop 中有著崇高的地位。
然而,Photoshop 的不一定是最好的選擇〜
這次 NVIDIA,就搞出了一個新 AI ,擁有技驚四座的 P 圖本領。
比方,給你這樣一張圖。
嗯,對,就是這樣,畫面嚴重缺失。
請用 AI 把這張圖修復一下,P 得要看起來像原圖一樣真實。
難不難?這畫面上是啥都不一定能看清。
普通的 AI 也就能自動修補成下面這樣或那樣 ↓
Nvidia 可以把圖復原成這樣 ↓
相較於普通的 AI 可以看到圖中的水波更自然、生動,不像是「蓋章」一樣複製水紋,嚇傻我了,再對比下原圖。↓
有沒有!真得差不多!
再來一個,還是同樣畫面確缺失嚴重。
普通的 AI 也就能自動修補成下面這樣或那樣。
Nvidia 的 AI ↓
原圖 ↓
但,這個技術有什麼用?
局部 P 圖,才是這個技術真正發揮實力的地方。
比如下面把左圖中的「人,線,紅旗,石頭,棍子」都 P 掉,應該怎麼做?很簡單,就是直接塗抹掉,然後 AI 就自動修復了。
極端情況,比方處理人臉時候,眼睛被遮住了。
NVIDIA 的 AI 就能重新補上一雙眼睛,當然不可能是原來那個人的眼睛,但是至少能彌補的也算相對完美吧〜
NVIDIA 的新 AI 是怎麼做到的?
答案就在這家公司新發布的論文裡。這篇論文標題:使用部分卷積(Partial Convolution Layer)的不規則孔的圖像修復。
英偉達的研究團隊提出了一種新的模型,使用部分卷積的方法,其中卷積被掩蔽,並且僅基於有效像素進行重新歸一化等處理。
論文中,還與現有其他方法進行了對比,有很多公式。
比如這種。
詳細的方法和原理,可以前往閱讀論文,地址:
https://arxiv.org/abs/1804.07723
總而言之就是一句話:「我不是針對誰,在座的都是……。」
最後順便提一下,這篇論文的作者「桂林柳」,在加入 NIVDIA 之前,還曾在 Adobe Research 實習過。
Adobe 公司,就是搞出的 Photoshop(和一堆其他軟體)的那家公司〜
─ ─
(本文經合作夥伴 量子位 授權轉載,並同意 TechOrange 編寫導讀與修訂標題,原文標題為 〈 论PS的功力,英伟达的AI这次谁也不服 〉,首圖來源:YouTube。)
延伸閱讀:
Google AI 部門新掌門人 Jeff Dean:聰明到智商打敗 AI 的男人