蘋果研究凝視跟蹤以改變鏡頭控制AR和VR中的相機

Apple AR硬件可能會移動鏡頭或外接攝像頭，從而為“ Apple Glass”佩戴者提供正確的對焦，以準確顯示他們所看的東西。

蘋果公司以前有很多有關(guān)注視跟蹤的專利，例如與隱私相關(guān)的專利，用于檢測您是否分心或閱讀通知。它甚至只是通過渲染您要查看的內(nèi)容來加快Apple AR的速度，或者降低其他所有內(nèi)容的分辨率以節(jié)省電量，這完全與它有關(guān)。

但是，現(xiàn)在，“專注于虛擬和增強現(xiàn)實系統(tǒng)”是一項新授予的專利，希望進一步擴展凝視跟蹤。這是有關(guān)自動調(diào)整鏡頭的另一項較早的專利申請的補充，并增加了您注視控制外部相機的潛力。

蘋果公司說：“對于增強現(xiàn)實應用，注視跟蹤信息可用于引導外部相機聚焦在用戶注視的方向上，從而使相機聚焦在用戶注視的物體上。”

“對于AR或VR應用，凝視跟蹤信息可用于調(diào)整眼鏡鏡片的焦點，以使用戶當前在顯示器上觀看的虛擬內(nèi)容具有適當?shù)木凵⒍?，以匹配用戶眼睛的聚光度?“它繼續(xù)。

因此，該專利與如何跟蹤注視無關(guān)。這是關(guān)于信息一旦被追蹤該如何處理。例如，用戶可能在虛擬會議中，在該會議中，實際的空間通過一系列攝像機中繼給了他們。

當他們向左看時，可以自動告訴該物理房間中的攝像機重新對焦，甚至重新定位以提供最佳視野。蘋果公司表示：“外部相機可能包括自動對焦機制，使相機可以自動對焦在環(huán)境中的物體或表面上。”

不過，這不只是提供最佳視圖。看來，這還與解決Apple在對頭戴式顯示器(HMD)的測試中必須發(fā)現(xiàn)的問題(例如“ Apple Glass ”)有關(guān)。

蘋果公司說：“在傳統(tǒng)的AR HMD中，自動對焦機制可能專注于用戶沒有看的東西。” 這可能是在不具有注視跟蹤功能的HMD中實現(xiàn)的，盡管蘋果沒有指定。

它只是說，凝視跟蹤可以“將外部攝像機的自動聚焦機制指向用戶注視的方向，以便外部攝像機將焦點對準用戶當前正在查看的環(huán)境中的對象。”

最終，目標是始終向用戶顯示他們選擇要查看的內(nèi)容。該專利還涵蓋了他們正在觀看的是錄音時的情況。

蘋果說：“在某些實施例中，可以在回放錄制的視頻期間應用調(diào)節(jié)眼透鏡的焦點。” “深度信息可以與視頻一起記錄，也可以從計算機圖形中獲取。”

該專利僅歸功于D.Amnon Silverstein，他先前的相關(guān)工作包括使用運動檢測自動對焦圖像的專利。