蘋果推出ARKit 3帶來更身臨其境的增強現(xiàn)實體驗

蘋果公司在WWDC主題演講中宣布了一系列豐碩的成果，并宣布了ARKit 3，該產(chǎn)品對增強現(xiàn)實平臺ARKit進行了重大改進。主要的新功能包括“人物遮擋”(可以使您在人的前面和后面分層內(nèi)容)以及“運動捕捉”(Motion Capture)，它可以捕捉人的動作以注入AR體驗。

“人物遮擋”可以同時跟蹤多達三張臉，允許將人體運動集成到您的應(yīng)用中，以提供身臨其境的效果。借助它，AR內(nèi)容可以現(xiàn)實地在個人的前后傳遞，或者實現(xiàn)綠屏效果。新的多人臉跟蹤功能可以使用iPhone X，iPhone XS，iPhone XS Max，iPhone XR和iPad Pro上的前置TrueDepth相機一次跟蹤三個人臉。

新的ARKit有助于通過單個攝像頭實時捕獲人體運動。它可以感知身體的位置和運動，以允許將運動和姿勢用作場景的輸入并作為動畫對象進行操作。ARKit可以同時使用前置和后置攝像頭進行面部和世界跟蹤，因此您可以在后置攝像頭視圖中與AR內(nèi)容進行交互。

該更新允許一次檢測多達100張圖像，并自動估計圖像的實際尺寸。它還增強了3D對象檢測以實現(xiàn)更好的對象識別，并使用機器學(xué)習來更快地檢測環(huán)境中的平面。

ARKit 3在共享的世界地圖上實現(xiàn)了多個人之間的實時協(xié)作，從而使參與Minecraft Earth舞臺上演示的多人游戲等環(huán)境變得更加容易。

Reality Composer和RealityKit

結(jié)合新的ARKit 3，Apple還推出了Reality Composer和RealityKit，可輕松創(chuàng)建交互式AR體驗。這是針對所有開發(fā)人員的，但對于沒有豐富3D經(jīng)驗的開發(fā)人員尤其有利。RealityKit和Reality Composer都承諾將在未來加速AR應(yīng)用程序和內(nèi)容的開發(fā)。

Reality Composer是一款適用于iOS，iPadOS和MacOS的新創(chuàng)作應(yīng)用程序，即使是新的3D開發(fā)人員，也可以通過拖放界面以及預(yù)先構(gòu)建的3D對象和動畫庫輕松地制作原型并產(chǎn)生AR體驗。您也可以導(dǎo)入自己的USDZ文件。

您可以獲得在臺式Mac，iPhone或iPad之間移動的靈活性，以及??通過實時鏈接進行構(gòu)建的能力。例如，您可以使用動畫來移動或縮放虛擬場景，或者向虛擬對象添加擺動或旋轉(zhuǎn)，并通過您選擇的觸發(fā)器將其關(guān)閉。您可以放置??，移動和旋轉(zhuǎn)AR對象以創(chuàng)建新的AR體驗，您可以使用Xcode將其直接集成到您的應(yīng)用程序中或?qū)С龅紸R Quick Look。

RealityKit框架提供了經(jīng)過改進的工具，可以完成逼真的渲染，環(huán)境映射，并支持相機噪聲，運動模糊，環(huán)境反射和底影，以集成虛擬和現(xiàn)實內(nèi)容。它可以處理動畫，物理和空間音頻，并允許開發(fā)人員通過新的RealityKit Swift API來利用該框架。

AR Quick Look使您可以將3D對象放置在現(xiàn)實世界中，并支持在Reality Composer中創(chuàng)建的模型和場景，從而可以創(chuàng)建用于在iOS 12及更高版本上查看和共享的交互式體驗。

ARKit 3是iOS 13開發(fā)人員beta版的一部分。