虛幻的新iPhone應(yīng)用程序使用Face ID傳感器進(jìn)行實(shí)時(shí)運(yùn)動(dòng)捕捉

這是iPhone的TrueDepth傳感器陣列的另一個(gè)罕見(jiàn)的殺手級(jí)應(yīng)用。

虛幻引擎開(kāi)發(fā)商Epic Games發(fā)布了Live Link Face，這是一個(gè)iPhone應(yīng)用程序，它使用電話中的前置3D傳感器對(duì)視頻游戲，動(dòng)畫(huà)或電影等3D項(xiàng)目中的面部動(dòng)畫(huà)進(jìn)行實(shí)時(shí)運(yùn)動(dòng)捕捉。

該應(yīng)用程序使用Apple的ARKit框架和iPhone的TrueDepth傳感器陣列中的工具，將觀看手機(jī)的演員將實(shí)時(shí)運(yùn)動(dòng)捕獲流傳輸?shù)礁浇ぷ髡旧线\(yùn)行的虛幻引擎中的3D角色。它捕獲面部表情以及頭部和頸部的旋轉(zhuǎn)。

據(jù)Epic 宣布該應(yīng)用程序的博客稱，Live Link Face可以一次流傳輸?shù)蕉嗯_(tái)機(jī)器，并且“強(qiáng)大的時(shí)間碼支持和精確的幀精度可實(shí)現(xiàn)與其他舞臺(tái)組件(如攝像機(jī)和人體動(dòng)作捕捉)的無(wú)縫同步” 。用戶可以從手機(jī)的前置攝像頭獲取帶有原始時(shí)間的CSV原始混合形狀數(shù)據(jù)和MOV，并帶有時(shí)間碼。

對(duì)于許多人來(lái)說(shuō)，iPhone的TrueDepth傳感器陣列似乎是解決問(wèn)題的一種解決方案-觸摸ID可以在大多數(shù)人的早期iPhone中正常使用，除了Face ID之外，該技術(shù)沒(méi)有很多明確的應(yīng)用。當(dāng)然，有Animoji，很多人喜歡它們-但大多數(shù)人不會(huì)說(shuō)他們單槍匹馬地證明了這項(xiàng)技術(shù)的合理性。

但這是一個(gè)明確的賣(mài)點(diǎn)，盡管是針對(duì)少數(shù)人群的：獨(dú)立游戲開(kāi)發(fā)商和電影制片人可以在iPhone上使用類(lèi)似的應(yīng)用程序進(jìn)行動(dòng)作捕捉，通過(guò)真實(shí)的人類(lèi)演員的面部表情和其他動(dòng)作來(lái)使虛擬角色栩栩如生。傳統(tǒng)上，這涉及到設(shè)備昂貴的工作室，除了大公司以外，其他人都無(wú)法企及。

當(dāng)然，iPhone傳感器可以管理的動(dòng)作捕捉不如AAA游戲開(kāi)發(fā)工作室或大型電影所使用的動(dòng)作捕捉準(zhǔn)確，因此那些高端工作室不會(huì)將其裝備齊全的Mo-Cap錄音室用于iPhone。但是現(xiàn)在，個(gè)人創(chuàng)建者和較小的團(tuán)隊(duì)可以做一些以前成本過(guò)高的事情。

但是，從本質(zhì)上講，這并不是真正的消費(fèi)者用例。到目前為止，這些傳感器主要已被Apple和第三方應(yīng)用程序開(kāi)發(fā)人員用來(lái)使AR應(yīng)用程序和照片濾鏡更準(zhǔn)確。

10歲時(shí)團(tuán)結(jié)一致：無(wú)論好壞，游戲開(kāi)發(fā)從未如此簡(jiǎn)單

蘋(píng)果最近在iPad Pro上增加了一個(gè)激光雷達(dá)傳感器，并且在互聯(lián)網(wǎng)上流傳著很多謠言，稱它也將成為頂級(jí)iPhone機(jī)型。盡管iPad Pro的后傳感器使用的技術(shù)與正面的TrueDepth陣列不同，但它可以產(chǎn)生相似的結(jié)果。蘋(píng)果已經(jīng)展示了iPad Pro的后部傳感器，可以記錄人的動(dòng)作捕捉-盡管是人的整個(gè)身體，而不是他們的臉。

對(duì)于那些不熟悉的人來(lái)說(shuō)，虛幻引擎作為一種圖形引擎開(kāi)始使用，該圖形引擎被Triple-A視頻游戲工作室使用，用于戰(zhàn)爭(zhēng)機(jī)器和 質(zhì)量效應(yīng)之類(lèi)的游戲 ，并且隨著時(shí)間的流逝，它被獨(dú)立開(kāi)發(fā)者以及在電影制作，建筑等其他情況下使用和設(shè)計(jì)。它可以與另一個(gè)流