研究人員開發(fā)出媲美蘋果人像光效的打光功能

蘋果首次在 iPhone 7 Plus 上引入雙攝，并帶來了名為“人像模式”的新功能：通過立體匹配算法，使用人像模式時(shí)，兩顆攝像頭會同時(shí)記錄畫面，然后通過匹配不同畫面的像素，得出場景特征的“深度信息”，從而拍出自帶景深的照片。

到了iPhone 8 Plus、iPhone X 以上機(jī)型，蘋果還帶來了“人像光效”，在使用人像模式（或者后期編輯）時(shí)生成各種影棚級的打光效果，例如“攝影室燈光”可提亮面部特征、“輪廓光”用于實(shí)現(xiàn)更加戲劇化的定向照明、“舞臺光”可讓主體在聚光燈下突顯出來、“單色舞臺”可提供經(jīng)典的黑白舞臺燈光。

雖然蘋果將這兩項(xiàng)功能帶到了 iPhone XR 上，但因?yàn)橹挥袉螖z，iPhone XR 無法像雙攝手機(jī)一樣詳細(xì)記錄畫面的深度信息，所以人像模式和人像光效都只能實(shí)現(xiàn)部分功能。而如果你用的是更早期的單攝 iPhone，那么這兩項(xiàng)功能同樣與你無緣。

但最近來自加利福尼亞大學(xué)圣地亞哥分校的研究人員找到了一種能夠“重建”人像光效的方法，甚至在只有單顆攝像頭的手機(jī)上也能獲得不錯(cuò)的效果。

研究人員介紹稱這一功能通過 AI 判斷照片中的人物信息，并在神經(jīng)網(wǎng)絡(luò)的幫助下重建臉部的光照，并且允許使用者在 3D 空間中將光源打在任何地方，從而模擬出更多的打光效果，同時(shí)能夠選擇性地改變背景與之匹配。相比之下，蘋果只提供至多六種打光效果。

圖片:58e6ac4bf130cb0.gif

不過這一技術(shù)目前還比較粗糙，離商用可能還有一段距離。

雖然研究人員表示生成一張 640×640 像素的照片僅需要 160 毫秒，但要處理目前智能手機(jī)較為普遍的 1200 萬像素的照片時(shí)，時(shí)間會長達(dá) 4.7 秒。此外，訓(xùn)練神經(jīng)網(wǎng)絡(luò)的樣本量也可能不足，畢竟這個(gè) demo 是由 18 人組成的小樣本訓(xùn)練而來的。如果真的走到了正式推出這一步的話，必定需要考慮到不同人種、膚色、性別的影響。