Apple多年來一直致力于AR眼鏡 iOS 13只是最新的標(biāo)志

在WWDC 2019主題演講中，Apple花時間展示了它為ARKit 3帶來的一些最新功能，ARKit 3是該公司的框架，允許開發(fā)人員為其應(yīng)用添加增強(qiáng)現(xiàn)實(shí)功能。作為iOS 13的一部分而增加的將使Apple的AR努力達(dá)到一個新的水平，更接近用戶期望的理想技術(shù)形式。

然而，就目前而言，Apple生態(tài)系統(tǒng)中的AR仍然局限于iPhone和iPad，這在用戶體驗(yàn)方面并不理想。使用耳機(jī)的AR版本可以提供效果，而不需要人們在移動設(shè)備上保持和查看有限的窗口，這可能是該技術(shù)的完美形式，并且Apple繼續(xù)更接近創(chuàng)建每一個對平臺的改進(jìn)。

iOS 13中的ARKit 3

主題演講強(qiáng)調(diào)了迄今為止AR體驗(yàn)中缺少的一些元素，這些元素通過早期的ARKit版本實(shí)現(xiàn)。在ARKit 3下，進(jìn)行了許多更改以使其更具身臨其境，并使開發(fā)人員能夠在其應(yīng)用程序中提供更多功能。

ARKit 3的一個關(guān)鍵組件是人物遮擋，其中iOS設(shè)備檢測到有人站在AR增強(qiáng)的場景中間。ARKit 3不是用數(shù)字對象平直地覆蓋攝像機(jī)視圖，而是可以檢測到被人與用戶之間的距離，如果它們理論上比數(shù)字對象更近，可以改變疊加以使對象看起來更像在人的背后。

該技術(shù)還可以實(shí)現(xiàn)綠屏風(fēng)格效果，通過應(yīng)用程序查看的主題可以看起來在完全數(shù)字化的環(huán)境中行走，而不需要色度鍵背景。

Apple還增加了動作捕捉功能，可以在應(yīng)用程序中實(shí)時分析和解釋主題的動作。將主體劃分為簡單的骨架，可以確定并監(jiān)視關(guān)節(jié)和骨骼的變化，這些運(yùn)動能夠觸發(fā)動畫或者被記錄以用于自定義的角色移動。

跟蹤變化也會影響ARKit Face Tracking，后者已經(jīng)利用現(xiàn)代iPhone和iPad Pro型號上的TrueDepth相機(jī)來分析用戶的臉部，例如Memoji和Snapchat。在ARKit 3中，面部跟蹤已經(jīng)擴(kuò)展，允許它同時處理多達(dá)三個面部。

另一個關(guān)鍵組件是用戶在同一AR環(huán)境中相互協(xié)作的能力。通過讓人們在單個會話中看到相同的項(xiàng)目和環(huán)境，這可以使多人游戲和協(xié)作工作在多人之間的AR中進(jìn)行，從而實(shí)現(xiàn)社交元素到AR體驗(yàn)。

ARKit 3中還引入的其他變化是能夠同時使用前后攝像頭跟蹤用戶的臉部和世界，同時檢測多達(dá)100個圖像，自動估計(jì)物理圖像大小，更強(qiáng)大的3D對象檢測，并通過機(jī)器學(xué)習(xí)改進(jìn)平面檢測。

Apple正在進(jìn)行的工作

除ARKit公告外，專利是蘋果AR眼鏡工作的第二個證據(jù)來源。

雖然Apple不打算在未來的產(chǎn)品和服務(wù)中使用其在專利商標(biāo)局提交的創(chuàng)意，但這些文件至少表明Apple以前對研發(fā)工作感興趣的領(lǐng)域。

AR耳機(jī)的一個關(guān)鍵元素是顯示器，因?yàn)榭焖夙憫?yīng)時間對于創(chuàng)建虛擬和真實(shí)場景組合的完美錯覺至關(guān)重要。2016年12月和2017年1月的標(biāo)題為“具有多種掃描模式的顯示器”的專利申請描述了顯示器的電路如何僅為每次刷新而不是整個顯示器更新顯示器的部分部分，以便最小化偽像出現(xiàn)在高位的可能性。分辨率和高刷新率屏幕。

僅更新屏幕的一部分還可以減少顯示器執(zhí)行每次刷新的工作量，從而縮短刷新周期并提高整體屏幕更新速率。更快的更新還可以幫助減少某些用戶的暈動病，其中顯示器的更新速度不足以匹配用戶頭部的物理移動。

正如2017年提交的“預(yù)測性，虛擬虛擬現(xiàn)實(shí)系統(tǒng)”一樣，高速渲染世界的能力也可以幫助預(yù)防惡心和暈動病。由具有多攝像頭設(shè)置的耳機(jī)組成，硬件將以低分辨率和高分辨率拍攝世界的照片，其中較高的部分向用戶顯示他們的眼睛在顯示器上看，而較低的部分填充外圍，

2016年“具有世界和用戶傳感器的顯示系統(tǒng)”使用耳機(jī)外部和內(nèi)部的攝像頭來跟蹤環(huán)境和用戶的眼睛，表情和手勢，從而能夠創(chuàng)建和交互一種形式的增強(qiáng)現(xiàn)實(shí)圖像。

眼動追蹤在專利申請中也占有重要地位，其中包括2019年5月用于確定眼優(yōu)勢的一項(xiàng)，以及2018年的其他一些提示實(shí)際上盡可能靠近用戶頭部進(jìn)行眼動追蹤的方法。通過使跟蹤設(shè)備更靠近面部并使用諸如“熱鏡”之類的物品來反射紅外光，更少的重量定位在遠(yuǎn)離用戶頭部的位置，從而產(chǎn)生更舒適的用戶體驗(yàn)。

在更實(shí)際的層面上，Apple還探索了AR眼鏡如何完美貼合在2019年使用各種調(diào)節(jié)系統(tǒng)，包括電動收緊帶和充氣部分，以防止耳機(jī)一旦磨損就移動。熱調(diào)節(jié)也被認(rèn)為是一個重要元素，不僅可以冷卻耳機(jī)內(nèi)部的硬件，還可以冷卻用戶的臉部。

Apple還考慮過如何創(chuàng)建一種智能眼鏡，而不是使用單獨(dú)的顯示器，只需將用戶的iPhone放在眼前。作為基于智能手機(jī)的簡單VR耳機(jī)外殼的更先進(jìn)形式，Apple提出的“用于保持2017年便攜式電子設(shè)備的頭戴式顯示設(shè)備從一側(cè)滑動iPhone，包括一個攝像頭和外部按鈕，內(nèi)置 - 手機(jī)中的耳機(jī)和遙控器。

為了進(jìn)行互動，Apple花了一些時間研究如何在VR和AR系統(tǒng)中使用力感應(yīng)手套。通過使用導(dǎo)電線和嵌入式傳感器，手套和其他服裝可以提供力感應(yīng)能力，可以觸發(fā)命令，讀取手勢，甚至計(jì)算與物理對象接觸的手指數(shù)量。

在申請方面，Apple的專利申請表明AR可用于乘車服務(wù)，智能眼鏡可讓客戶找到他們的乘車，反之亦然。對于導(dǎo)航，2019年的一項(xiàng)專利建議如何通過AR在真實(shí)世界的視圖中顯示興趣點(diǎn)，還可以擴(kuò)展其以建議房間中物品的位置，而不是顯著的地理特征。

蘋果創(chuàng)造某種智能眼鏡或AR耳機(jī)的想法已經(jīng)流傳了一段時間，并可能導(dǎo)致未來幾年硬件的發(fā)布。Loup Ventures的分析師Gene Munster在2018年建議蘋果可以在2021年末發(fā)布“Apple Glasses” ，可能在發(fā)布的第一年銷售多達(dá)1000萬臺，每臺售價約為1300美元。

另一位蘋果長期評論員郭明智最近提出，耳機(jī)可能會在2020年中期亮相，制造工作可能會在2019年底開始。

至于所謂的眼鏡如何出現(xiàn)，Kuo建議他們可以采取行動更多作為iPhone的顯示器執(zhí)行大部分處理。WiGig聯(lián)盟一個可以提供無線連接的60千兆赫無線網(wǎng)絡(luò)系統(tǒng)，也已經(jīng)為該設(shè)備以及8K分辨率的目鏡以及所謂的代號“ T288 ” 傾斜。

2017年泄露的安全報(bào)告中 出現(xiàn)了耳機(jī)開發(fā)，在Apple的辦公室中，測試原型設(shè)備的人員需要“急救以外的醫(yī)療”。特別是與眼睛疼痛相關(guān)的傷害，這表明它正在測試視覺相關(guān)的東西，可能是某種形式的耳機(jī)。

據(jù)報(bào)道，蘋果公司還與技術(shù)供應(yīng)商就2019年在CES上收購AR耳機(jī)組件進(jìn)行了交談，其中隱姓埋名的Apple員工正在訪問波導(dǎo)硬件供應(yīng)商。

此外，還收購了與AR和耳機(jī)生產(chǎn)密切相關(guān)的公司。2017年，Apple收購了眼動追蹤公司SensoMotoric Instruments2018年8月，它收購了Akonia Holographics，這是一家專注于AR耳機(jī)專用鏡頭開發(fā)的創(chuàng)業(yè)公司。