Facebook利用AI將幾乎所有2D照片轉(zhuǎn)換為3D圖像

幾年前，F(xiàn)acebook宣布支持3D照片，但該功能僅限于使用具有雙鏡頭“人像模式”功能的智能手機(jī)拍攝的圖像。它在周五的公告中解釋說，由于公司的機(jī)器學(xué)習(xí)技術(shù)，情況正在發(fā)生變化。Facebook表示，使用AI，它可以將幾乎所有2D圖像轉(zhuǎn)換為3D照片，從而將該功能擴(kuò)展到更多用戶。

盡管雙鏡頭智能手機(jī)攝像頭變得越來越普遍，但Facebook指出，大多數(shù)移動(dòng)設(shè)備仍僅配備一個(gè)后置攝像頭。這種新的具有機(jī)器學(xué)習(xí)功能的系統(tǒng)能夠從2D圖像創(chuàng)建3D圖像，而不管它是用智能手機(jī)捕獲的，還是用膠片相機(jī)捕獲的舊照片，然后進(jìn)行數(shù)字化處理。

Facebook指出，這意味著可以用全新的方式體驗(yàn)舊的家庭照片。同樣，帶有雙后置攝像頭但只有單個(gè)前置攝像頭的高端手機(jī)仍可用于創(chuàng)建3D自拍。Facebook表示，其“增強(qiáng)型” 3D照片功能適用于使用中檔或更高版本Android手機(jī)或至少使用iPhone 7智能手機(jī)的任何人。

新功能背后的技術(shù)涉及一個(gè)卷積神經(jīng)網(wǎng)絡(luò)，該神經(jīng)網(wǎng)絡(luò)可以快速確定2D圖像中特征對(duì)象的3D位置。該系統(tǒng)經(jīng)過優(yōu)化，可在普通平板電腦或智能手機(jī)上運(yùn)行幾分之一秒，而部分原因是Facebook的ChamNet和FBNet技術(shù)使之成為可能。

Facebook說，它也期待使用這些技術(shù)來生成使用智能手機(jī)和平板電腦拍攝的視頻的高質(zhì)量深度估計(jì)。但是，這比使用圖像進(jìn)行類似操作要復(fù)雜得多，因?yàn)橐曨l是由許多單獨(dú)的幀組成的，并且相對(duì)于前后的幀，每個(gè)幀必須具有一致的深度數(shù)據(jù)。