Search
Close this search box.

FB 發明 AI 專治「拍照閉眼症」,效果拔群我大推!

Facebook Ai 人工智慧 閉眼 p圖 拍照閉眼症

【我們為什麼挑選這篇文章】一張大家都美到成仙的團體合照,就這麼剛好你閉上了眼,是該犧牲小我還是凹大家重拍?
現在臉書用 AI 幫你解決這個問題:自動開眼,比廟口開天眼的仙姑還神,以後拍照可以閉眼拍都沒關係了。(責任編輯:楊采翎)

作者/量子位 郭一璞

本文經 AI 新媒體量子位(公眾號 ID:QbitAI)授權轉載,轉載請聯繫出處

端午的三天假期,你們是不是都穿得帥帥美美的出去浪了?

既然出門了,一定要拍照發朋友圈(尤其是拍女朋友,要修圖,劃重點)。

想像一下,當你帶著貌若天仙的女友在海邊,她穿著飄逸的波西米亞大擺長裙,海風吹著裙子飛舞,驀然回首的一刻,露出新垣結衣般的笑​​容。

你抓拍下了這一刻,然後發現:哎呀,眨眼了

可是,那一刻的姿勢和美感再也無法復刻。

這下瞎了,等著回去打開 PS 把眼睛放上去吧。拍照 5 秒鐘,P 圖兩小時。

畢竟,P 一雙眼睛上去,這是多麼不自然的一件事情。雖然 Adobe 也提供了算法來幫你 P 眼睛,但是似乎還不如手動摳圖來的真實。

Facebook 幫你開靈魂之窗

所以,Facebook 幫你做了一個開眼 AI,專治眨眼照片。

首先,找到一個 GAN,由 GAN 來負責找一雙眼睛,摳圖摳出來放到你女朋友閉眼的照片上。系統中的一部分需要找到人臉,以及識別面部表情;另一部分根據表情的反饋,重複創建有眼睛的圖像

但是,此時生成的照片過於不自然了。

於是,Facebook 的研究人員靈機一動:我們的用戶不是會在 Facebook 上發很多自己的照片嗎?拿沒 P 過的睜眼照片來當例子試試。

現在,看過「標準答案」的 AI 越發聰明了,它已經可以生成一些毫無 PS 痕蹟的照片。

第一列是「標準答案」,日常睜眼照片;
第二列是眨眼圖原圖;
第三列是 Adobe 算法摳圖貼上去的效果;
第四列是學習了標準答案之後 GAN 的作品。

效果驚人,第四列中沒有出現顏色不匹配的情況,也沒有不自然的過渡痕跡,就好像照片中的人物睜眼了一樣。

這個 AI 在測試中效果拔群。超過一半的測試中,人類測試員搞錯了照片的真假。

如果要知道 AI 更多的事情,你需要來 Connect。

效果好是有前提的

一個照片的開眼效果,既要考慮 AI 奮鬥,也要考慮數據的質量。

比如說,如果劉海擋住了眼睛,或者飛揚的頭髮遮住了眼睛的一部分:

那對不住,總會產生一些陰影之類的效果,影響「開眼」質量。

另外,還需要你的其他睜著眼睛的照片,Facebook 做這件事就有一個天生的好處:很多用戶都會在 Facebook 上傳一些自己的照片,這些照片一方面可以拿來給 AI 做範例,另一方面還可以與貼完眼睛的照片對比,檢驗生成的質量和效果。

他們的這項研究,就叫做 ExGANs。別想歪了,不是用了這個 GAN 就變 Ex,這裡的 Ex 是 Exemplar,範例的意思。

從此以後,閉著眼睛也能自拍發 Facebook 了。

哦對了,這個社交網站並不存在,不是麼?

最後,附論文傳送門~
Eye In-Painting with Exemplar Generative Adversarial Networks
作者:Brian Dolhansky, Cristian Canton Ferrer
發表於CVPR 2018
arXiv:https://arxiv.org/abs/1712.03999
代碼:https://github.com /bdol/exemplar_gans

─ ─

(本文經合作夥伴 量子位  授權轉載,並同意 TechOrange 編寫導讀與修訂標題,原文標題為 〈大開眼界:Facebook做了一個會“開眼”的AI,拯救眨眼照片〉。)

延伸閱讀

AI 總是貼心人設想?Google 內部影片:其實它正全面接管你的人生!
【拿搖桿的科技農夫正夯】日本無人機 10 分鐘播種 2 分地,農事效率高的驚人
AI 成為中國高中生必修科目,難怪我媽一天到晚說強國人很有競爭力