(19)國家知識產(chǎn)權(quán)局(30)優(yōu)先權(quán)數(shù)據(jù)(62)分案原申請數(shù)據(jù)(71)申請人蘋果公司地址美國加利福尼亞州(72)發(fā)明人川島家幸B·海拉科M·烏贊P·V·杜德列諾夫K·W·科隆巴托維奇(74)專利代理機構(gòu)北京市漢坤律師事務所專利代理師魏小薇吳麗麗GO6V20/20(2022.01)GO6V20/52(2022.01)GO6V40/20(2022.01)(54)發(fā)明名稱用于改善用戶環(huán)境感知的方法本申請涉及用于改善用戶環(huán)境感知的方法。在一些實施方案中，計算機系統(tǒng)顯示例示可能交互的區(qū)域的虛擬內(nèi)容，并且顯示沉浸式虛擬內(nèi)容。在一些實施方案中，計算機系統(tǒng)降低沉浸式虛擬內(nèi)容的視覺顯著性并且顯示可能交互的區(qū)域。在一些實施方案中，計算機系統(tǒng)生成與用戶的環(huán)境中的物理對象相關聯(lián)的警告。在一些實施2在與顯示生成部件和一個或多個輸入設備通信的計算機系統(tǒng)處：在經(jīng)由所述顯示生成部件顯示第一虛擬內(nèi)容時，其中所述第一虛擬內(nèi)容正在遮擋物理環(huán)境的第一部分，經(jīng)由所述一個或多個輸入設備檢測位于所述物理環(huán)境的所述第一部分中響應于檢測到所述物理環(huán)境的所述第一部分中的所述第一人：根據(jù)確定所述第一人滿足一個或多個標準，其中所述一個或多個標準指示所述計算機系統(tǒng)已檢測到所述第一人的注意力指向所述計算機系統(tǒng)的用戶，提高相對于所述第一虛擬內(nèi)容的所述第一人的視覺顯著性；以及根據(jù)確定所述第一人不滿足所述一個或多個標準，放棄提高相對于所述第一虛擬內(nèi)容的所述第一人的所述視覺顯著性。2.根據(jù)權(quán)利要求1所述的方法，其中提高相對于所述第一虛擬內(nèi)容的所述第一人的所述視覺顯著性包括將所述第一人的所述視覺顯著性提高到相對于所述第一虛擬內(nèi)容的第響應于在所述物理環(huán)境的所述第一部分中檢測到所述第一人并且在所述第一人滿足所述一個或多個標準之前，將相對于所述第一虛擬內(nèi)容的所述第一人的所述視覺顯著性提高到相對于所述第一虛擬內(nèi)容的第二視覺顯著性，其中所述第二視覺顯著性小于所述第一視覺顯著性。3.根據(jù)權(quán)利要求1所述的方法，其中所述一個或多個標準包括當所述計算機系統(tǒng)已檢測到所述第一人的注視指向所述計算機系統(tǒng)的所述用戶時滿足的標準。4.根據(jù)權(quán)利要求1所述的方法，其中所述一個或多個標準包括當所述計算機系統(tǒng)已檢測到滿足一個或多個第二標準的所述第一人的語音時滿足的標準。5.根據(jù)權(quán)利要求1所述的方法，其中所述一個或多個標準包括當所述計算機系統(tǒng)已檢測到滿足一個或多個第二標準的所述第一人的身體的相應部分時滿足的標準。6.根據(jù)權(quán)利要求5所述的方法，其中當所述計算機系統(tǒng)檢測到所述第一人的所述身體的所述相應部分與所述計算機系統(tǒng)的所述用戶的距離小于閾值距離時，滿足所述標準。7.根據(jù)權(quán)利要求5所述的方法，其中當所述計算機系統(tǒng)檢測到相對于所述計算機系統(tǒng)的所述用戶，所述第一人的所述身體的所述相應部分的取向在閾值取向以內(nèi)時，滿足所述標準。8.根據(jù)權(quán)利要求1所述的方法，所述方法還包括：在經(jīng)由所述顯示生成部件顯示所述第一虛擬內(nèi)容時，經(jīng)由所述一個或多個輸入設備檢測位于正在被所述第一虛擬內(nèi)容遮擋的所述物理環(huán)境的相應部分中的相應人；以及響應于檢測到在所述物理環(huán)境的所述相應部分中的所述相應人，并且根據(jù)確定所述相應人滿足所述一個或多個標準：根據(jù)確定所述計算機系統(tǒng)的第一設置具有第一值，提高相對于所述第一虛擬內(nèi)容的所根據(jù)確定所述計算機系統(tǒng)的所述第一設置具有不同于所述第一值的第二值，放棄提高相對于所述第一虛擬內(nèi)容的所述相應人的所述視覺顯著性。9.根據(jù)權(quán)利要求8所述的方法，所述方法還包括：3經(jīng)由所述顯示生成部件顯示所述計算機系統(tǒng)的控制用戶界面，所述控制用戶界面包括可選擇選項，所述可選擇選項能夠被選擇來設置用于所述第一設置的所述第一值或所述第10.根據(jù)權(quán)利要求1所述的方法，其中提高相對于所述第一虛擬內(nèi)容的所述第一人的所述視覺顯著性包括修改所述第一虛擬內(nèi)容的相應部分的視覺外觀，其中所述第一虛擬內(nèi)容的所述相應部分的形狀沿著至少一個軸是非對稱的。11.根據(jù)權(quán)利要求1所述的方法，其中提高相對于所述第一虛擬內(nèi)容的所述第一人的所述視覺顯著性包括修改所述第一虛擬內(nèi)容的相應部分的視覺外觀，所述方法還包括：在所述第一人滿足所述一個或多個標準時并且在相對于所述第一虛擬內(nèi)容所述第一人具有經(jīng)提高的視覺顯著性時：在所述第一虛擬內(nèi)容的所述相應部分是與相對于所述第一虛擬內(nèi)容的所述第一人的第一位置相對應的所述第一虛擬內(nèi)容的第一相應部分時，經(jīng)由所述一個或多個輸入設備檢測從相對于所述第一虛擬內(nèi)容的所述第一位置到相對于所述第一虛擬內(nèi)容的不同于所述第一位置的第二位置的所述第一人的移動；以及響應于檢測到從相對于所述第一虛擬內(nèi)容的所述第一位置到相對于所述第一虛擬內(nèi)容的所述第二位置的所述第一人的所述移動，修改與相對于所述第一虛擬內(nèi)容的所述第一人的所述第二位置相對應的所述第一虛擬內(nèi)容的第二相應部分的視覺外觀。12.根據(jù)權(quán)利要求1所述的方法，其中提高相對于所述第一虛擬內(nèi)容的所述第一人的所述視覺顯著性包括：將相對于所述第一虛擬內(nèi)容的所述第一人的所述視覺顯著性提高到相對于所述第一虛擬內(nèi)容的第一視覺顯著性；以及在將相對于所述第一虛擬內(nèi)容的所述第一人的所述視覺顯著性提高到所述第一視覺顯著性之后，將相對于所述第一虛擬內(nèi)容的所述第一人的所述視覺顯著性從所述第一視覺顯著性逐漸降低到相對于所述第一虛擬內(nèi)容的第二視覺顯著性。13.根據(jù)權(quán)利要求12所述的方法，所述方法還包括：在相對于所述第一虛擬內(nèi)容的所述第一人的所述視覺顯著性是相對于所述第一虛擬內(nèi)容的所述第二視覺顯著性時，經(jīng)由所述一個或多個輸入設備檢測所述計算機系統(tǒng)的所述用戶的指向所述第一人的注意力；以及響應于檢測到所述計算機系統(tǒng)的所述用戶的指向所述第一人的所述注意力，將相對于所述第一虛擬內(nèi)容的所述第一人所述視覺顯著性提高到相對于所述第一虛擬內(nèi)容的第三視覺顯著性，其中所述第三視覺顯著性大于所述第二視覺顯著性。14.根據(jù)權(quán)利要求12所述的方法，其中所述一個或多個標準是基于由所述計算機系統(tǒng)檢測到的注意力程度大于閾值注意力程度而被滿足的。15.根據(jù)權(quán)利要求1所述的方法，其中提高相對于所述第一虛擬內(nèi)容的所述第一人的所述視覺顯著性包括將相對于所述第一虛擬內(nèi)容的所述第一人的所述視覺顯著性提高到相對于所述第一虛擬內(nèi)容的第一視覺顯著性，所述方法還包括：在經(jīng)由所述顯示生成部件顯示所述第一虛擬內(nèi)容時，經(jīng)由所述一個或多個輸入設備檢測位于被所述第一虛擬內(nèi)容遮擋的所述物理環(huán)境的相應部分中的相應人；以及響應于檢測到所述物理環(huán)境的所述相應部分中的所述相應人，并且根據(jù)確定所述相應4人不滿足所述一個或多個標準，將相對于所述第一虛擬內(nèi)容的所述相應人的視覺顯著性提高到相對于所述第一虛擬內(nèi)容的第二視覺顯著性，所述第二視覺顯著性小于相對于所述第一虛擬內(nèi)容的所述第一視覺顯著性。16.根據(jù)權(quán)利要求1所述的方法，其中提高相對于所述第一虛擬內(nèi)容的所述第一人的所述視覺顯著性包括將相對于所述第一虛擬內(nèi)容的所述第一人的所述視覺顯著性提高到相對于所述第一虛擬內(nèi)容的第一視覺顯著性，所述方法還包括：在所述第一人具有相對于所述第一虛擬內(nèi)容的所述第一視覺顯著性時，經(jīng)由所述一個或多個輸入設備檢測來自所述計算機系統(tǒng)的所述用戶的輸入；以及在檢測到來自所述計算機系統(tǒng)的所述用戶的所述輸入時，并且根據(jù)確定來自所述計算機系統(tǒng)的所述用戶的所述輸入滿足一個或多個第二標準，降低相對于所述第一虛擬內(nèi)容的所述第一人的所述視覺顯著性。17.根據(jù)權(quán)利要求16所述的方法，其中所述一個或多個第二標準包括當來自所述用戶的所述輸入包括用于移動所述第一虛擬內(nèi)容的輸入時滿足的標準。18.根據(jù)權(quán)利要求16所述的方法，其中所述一個或多個第二標準包括當來自所述用戶的所述輸入包括用于滾動通過所述第一虛擬內(nèi)容的輸入時滿足的標準。19.根據(jù)權(quán)利要求16所述的方法，其中所述一個或多個第二標準包括當來自所述用戶的所述輸入包括與關聯(lián)于所述第一虛擬內(nèi)容的一個或多個控件交互的輸入時滿足的標準。20.根據(jù)權(quán)利要求16所述的方法，其中所述一個或多個第二標準包括當來自所述用戶的所述輸入包括所述用戶的身體的一部分處于相應位姿時滿足的標準。21.根據(jù)權(quán)利要求1所述的方法，其中所述第一虛擬內(nèi)容是經(jīng)由所述顯示生成部件而與環(huán)境的相應部分同時可見的，所述方法還包括：當所述環(huán)境的所述相應部分以相對于所述環(huán)境的第一視覺顯著性可見時，經(jīng)由所述一個或多個輸入設備檢測指向所述第一人的所述計算機系統(tǒng)的所述用戶的注意力；以及響應于檢測到指向所述第一人的所述用戶的所述注意力，將所述環(huán)境的所述相應部分的視覺顯著性提高到相對于所述環(huán)境的第二視覺顯著性。22.一種計算機系統(tǒng)，所述計算機系統(tǒng)與顯示生成部件和一個或多個輸入設備通信，所述計算機系統(tǒng)包括：一個或多個處理器；一個或多個程序，其中所述一個或多個程序存儲在所述存儲器中并且被配置為由所述一個或多個處理器執(zhí)行，所述一個或多個程序包括用于執(zhí)行根據(jù)權(quán)利要求1至21中任一項所述的方法的指令。23.一種存儲一個或多個程序的非暫態(tài)計算機可讀存儲介質(zhì)，所述一個或多個程序包括指令，所述指令在由與顯示生成部件和一個或多個輸入設備通信的計算機系統(tǒng)的一個或多個處理器執(zhí)行時，使得所述計算機系統(tǒng)執(zhí)行根據(jù)權(quán)利要求1至21所述的方法中的任一種方法。5[0001]本申請是申請?zhí)枮?02380067876.5、申請日為2023年9月23日、發(fā)明名稱為“用于改善用戶環(huán)境感知的方法”的專利申請的分案申請。[0002]相關申請的交叉引用[0003]本申請要求2022年9月23日提交的美國臨時申請63/376,961號以及2023年6月4日提交的美國臨時申請63/506,095號的權(quán)益，這兩個臨時申請的內(nèi)容全文以引用方式并入本文以用于所有目的。技術領域[0004]本公開整體涉及提供計算機生成的體驗的計算機系統(tǒng)，包括但不限于經(jīng)由顯示器提供虛擬現(xiàn)實和混合現(xiàn)實體驗的電子設備。背景技術[0005]近年來，用于增強現(xiàn)實的計算機系統(tǒng)的發(fā)展顯著增加。示例增強現(xiàn)實環(huán)境包括至少一些替換或增強物理世界的虛擬元素。用于計算機系統(tǒng)和其他電子計算設備的輸入設備(諸如相機、控制器、操縱桿、觸敏表面和觸摸屏顯示器)用于與虛擬/增強現(xiàn)實環(huán)境進行交互。示例虛擬元素包括諸如數(shù)字圖像、視頻、文本、圖標和控制元素(諸如按鈕和其他圖形)的虛擬對象。發(fā)明內(nèi)容[0006]用于與包括至少一些虛擬元素的環(huán)境(例如，應用、增強現(xiàn)實環(huán)境、混合現(xiàn)實環(huán)境和虛擬現(xiàn)實環(huán)境)進行交互的一些方法和界面是麻煩、低效并且受限的。例如，提供用于執(zhí)行與虛擬對象相關聯(lián)的動作的不足反饋的系統(tǒng)、需要一系列輸入來在增強現(xiàn)實環(huán)境中實現(xiàn)期望結(jié)果的系統(tǒng)，以及虛擬對象操縱復雜、繁瑣且容易出錯的系統(tǒng)，會給用戶造成巨大的認知負擔，并且減損虛擬/增強現(xiàn)實環(huán)境的體驗感。此外，這些方法花費的時間比必要的要長，從而浪費了計算機系統(tǒng)的能量。這后一考慮在電池驅(qū)動的設備中是特別重要的。[0007]因此，需要具有改進的方法和界面的計算機系統(tǒng)來向用戶提供計算機生成的體驗，從而使得用戶與計算機系統(tǒng)的交互對用戶來說更有效且更直觀。此類方法和界面任選地補充或替換用于向用戶提供擴展現(xiàn)實體驗的常規(guī)方法。此類方法和界面通過幫助用戶理解所提供的輸入與設備對這些輸入的響應之間的聯(lián)系，減少了來自用戶的輸入的數(shù)量、程度和/或性質(zhì)，從而形成了更有效的人機界面。[0008]通過所公開的系統(tǒng)減少或消除了與計算機系統(tǒng)的用戶界面相關聯(lián)的上述缺陷和其他問題。在一些實施方案中，計算機系統(tǒng)是具有相關聯(lián)顯示器的臺式計算機。在一些實施方案中，計算機系統(tǒng)是便攜式設備(例如，筆記本計算機、平板計算機或手持式設備)。在一些實施方案中，計算機系統(tǒng)是個人電子設備(例如，可穿戴電子設備，諸如手表或頭戴式設或多個相機。在一些實施方案中，計算機系統(tǒng)具有觸敏顯示器(6顯示器”)。在一些實施方案中，計算機系統(tǒng)具有一個或中，計算機系統(tǒng)具有一個或多個手部跟蹤部件。在一些實施方案中，除顯示生成部件之外，計算機系統(tǒng)還具有一個或多個輸出設備，這些輸出設備包括一個或多個觸覺輸出發(fā)生器和/或一個或多個音頻輸出設備。在一些實施方案中，計算機系統(tǒng)具有圖形用戶界面(GUI)、一個或多個處理器、存儲器和一個或多個模塊、存儲在存儲器中用于執(zhí)行多個功能的程序或指令集。在一些實施方案中，用戶通過觸控筆和/或手指在觸敏表面上的接觸和手勢、用戶的眼睛和手在相對于GUI(和/或計算機系統(tǒng))或用戶身體的空間中的移動(如由相機和其他移動傳感器捕獲的)和/或語音輸入(如由一個或多個音頻輸入設備捕獲的)與GUI進行交影、數(shù)字視頻錄制、網(wǎng)頁瀏覽、數(shù)字音樂播放、記筆記和/或數(shù)字視頻能的可執(zhí)行指令任選地被包括在被配置用于由一個或多個處理器執(zhí)行的暫態(tài)和/或非暫態(tài)計算機可讀存儲介質(zhì)或其他計算機程序產(chǎn)品中。[0009]需要具有用于與三維環(huán)境中的內(nèi)容進行交互的改進方法和界面的電子設備。此類方法和界面可補充或替換用于與三維環(huán)境中的內(nèi)容交互的常規(guī)方法。此類方法和界面減少了來自用戶的輸入的數(shù)量、程度和/或性質(zhì)，并且產(chǎn)生更高效的人機界面。對于電池驅(qū)動的計算設備，此類方法和界面節(jié)省功率，并且增大電池充電之間的時間間隔。[0010]在一些實施方案中，計算機系統(tǒng)顯示示出可能交互的區(qū)域的虛擬內(nèi)容，并且顯示沉浸式虛擬內(nèi)容。在一些實施方案中，計算機系統(tǒng)停止沉浸式虛擬內(nèi)容的顯示，并且顯示可能交互的區(qū)域。在一些實施方案中，計算機系統(tǒng)基于注意力生成針對被虛擬內(nèi)容遮擋的物理對象的警告。在一些實施方案中，計算機系統(tǒng)基于注意力為物理環(huán)境中的人降低虛擬內(nèi)容的視覺顯著性。[0011]需注意，上述各種實施方案可與本文所述任何其他實施方案相結(jié)合。本說明書中描述的特征和優(yōu)點并不全面，具體來說，根據(jù)附圖、說明書和權(quán)利要求書，許多另外的特征和優(yōu)點對本領域的普通技術人員將是顯而易見的。此外，應當指出，出于可讀性和指導性目的，在原則上選擇了本說明書中使用的語言，并且可以不這樣選擇以描繪或界定本發(fā)明的附圖說明[0012]為了更好地理解各種所述實施方案，應結(jié)合以下附圖參考下面的具體實施方式，其中類似的參考標號在所有附圖中指示對應的部分。[0013]圖1A是示出根據(jù)一些實施方案的用于提供XR體驗的計算機系統(tǒng)的操作環(huán)境的框[0014]圖1B至圖1P是用于在圖1A的操作環(huán)境中提供XR體驗的計算機系統(tǒng)的示例。[0015]圖2是示出根據(jù)一些實施方案的計算機系統(tǒng)的被配置為管理和協(xié)調(diào)用戶的XR體驗的控制器的框圖。[0016]圖3是示出根據(jù)一些實施方案的計算機系統(tǒng)的被配置為向用戶提供XR體驗的視覺組成部分的顯示生成部件的框圖。[0017]圖4是示出根據(jù)一些實施方案的計算機系統(tǒng)的被配置為捕獲用戶的手勢輸入的手7部跟蹤單元的框圖。[0018]圖5是示出根據(jù)一些實施方案的計算機系統(tǒng)的被配置為捕獲用戶的注視輸入的眼睛跟蹤單元的框圖。[0019]圖6是示出根據(jù)一些實施方案的閃光輔助的注視跟蹤流水線的流程圖。[0020]圖7A至圖7D示出了根據(jù)一些實施方案的顯示示出可能交互的區(qū)域的虛擬內(nèi)容并且顯示沉浸式虛擬內(nèi)容的計算機系統(tǒng)的示例。[0021]圖8A至圖8F是示出根據(jù)一些實施方案的顯示示出可能交互的區(qū)域的虛擬內(nèi)容并且顯示沉浸式虛擬內(nèi)容的示例性方法的流程圖。[0022]圖9A至圖9E示出了根據(jù)一些實施方案的降低沉浸式虛擬內(nèi)容的視覺顯著性并且顯示可能交互的區(qū)域的計算機系統(tǒng)的示例。[0023]圖10A至圖10G是示出根據(jù)一些實施方案的降低沉浸式虛擬內(nèi)容的視覺顯著性并且顯示可能交互的區(qū)域的方法的流程圖。[0024]圖11A至圖11E示出了根據(jù)一些實施方案的生成與用戶的環(huán)境中的物理對象相關聯(lián)的警告的計算機系統(tǒng)的示例。[0025]圖12A至圖12D是示出根據(jù)一些實施方案的生成與用戶的環(huán)境中的物理對象相關聯(lián)的警告的方法的流程圖。[0026]圖13A至圖13H示出了根據(jù)一些實施方案的基于一個或多個注意力相關因素改變?nèi)S環(huán)境中人的視覺顯著性的計算機系統(tǒng)的示例。[0027]圖14A至圖14H是示出根據(jù)一些實施方案的基于一個或多個注意力相關因素改變?nèi)S環(huán)境中人的視覺顯著性的方法的流程圖。具體實施方式[0028]根據(jù)一些實施方案，本公開涉及用于向用戶提供計算機生成的(CGR)體驗的用戶[0029]本文所述的系統(tǒng)、方法和GUI提供了電子設備促進與三維環(huán)境中的對象交互并操縱三維環(huán)境中的對象的改進方式。[0030]在一些實施方案中，計算機系統(tǒng)檢測對應于以大于閾值沉浸水平的沉浸水平顯示虛擬內(nèi)容的請求的輸入。在一些實施方案中，計算機系統(tǒng)顯示對應于可能與虛擬內(nèi)容交互的區(qū)域的視覺指示。在一些實施方案中，輸入包括將計算機系統(tǒng)的用戶移動到用戶的物理環(huán)境的對應于視覺指示的區(qū)域中。在一些實施方案中，計算機系統(tǒng)維持用戶環(huán)境的表示的一部分的顯示，同時以大于閾值沉浸水平的沉浸水平顯示虛擬內(nèi)容。[0031]在一些實施方案中，計算機系統(tǒng)檢測對應于降低虛擬內(nèi)容的視覺顯著性的請求的輸入。在一些實施方案中，輸入包括將計算機系統(tǒng)的用戶移出用戶的物理環(huán)境的其中計算機系統(tǒng)預期可能與虛擬內(nèi)容交互的區(qū)域。在一些實施方案中，降低視覺顯著性包括停止虛擬內(nèi)容的顯示。[0032]在一些實施方案中，計算機系統(tǒng)顯示遮擋用戶的物理環(huán)境中的物理對象的虛擬內(nèi)容。在一些實施方案中，根據(jù)確定物理對象可能與用戶的移動范圍沖突，計算機系統(tǒng)生成指示物理對象的存在的警告。在一些實施方案中，基于用戶對警告的注意力，計算機系統(tǒng)降8[0033]在一些實施方案中，計算機系統(tǒng)顯示遮擋計算機系統(tǒng)的物理環(huán)境中的人的虛擬內(nèi)容。在一些實施方案中，計算機系統(tǒng)突破虛擬內(nèi)容以允許人通過虛擬內(nèi)容的可見性。在一些實施方案中，計算機系統(tǒng)基于用戶和/或人的注意力改變?nèi)送ㄟ^虛擬內(nèi)容的可見性。[0034]圖1A至圖6提供了用于向用戶提供XR體驗的示例計算機系統(tǒng)的描述(諸如下文相對于方法800、1000、1200和/或1400所述)。圖7A至圖7D示出了根據(jù)一些實施方案的顯示示出可能交互的區(qū)域的虛擬內(nèi)容并且顯示沉浸式虛擬內(nèi)容的計算機系統(tǒng)的示例。圖8A至圖8F是示出根據(jù)一些實施方案的顯示示出可能交互的區(qū)域的虛擬內(nèi)容并且顯示沉浸式虛擬內(nèi)容的示例性方法的流程圖。圖7A至圖7D中的用戶界面用于示出圖8A至圖8F中的過程。圖9A至圖9E示出了根據(jù)一些實施方案的降低沉浸式虛擬內(nèi)容的視覺顯著性并且顯示可能交互的區(qū)域的計算機系統(tǒng)的示例。圖10A至圖10G是示出根據(jù)一些實施方案的降低沉浸式虛擬內(nèi)容的視覺顯著性并且顯示可能交互的區(qū)域的方法的流程圖。圖9A至圖9E中的用戶界面用于示出圖10A至圖10G中的過程。圖11A至圖11E示出了根據(jù)一些實施方案的用于生成與用戶的環(huán)境中的物理對象相關聯(lián)的警告的示例技術。圖12A至圖12D是根據(jù)各種實施方案的生成與用戶的環(huán)境中的物理對象相關聯(lián)的警告的方法的流程圖。圖11A至圖11E中的用戶界面用于示出圖12A至圖12D中的過程。圖13A至圖13H示出了根據(jù)一些實施方案的用于基于一個或多個注意力相關因素改變?nèi)S環(huán)境中人的視覺顯著性的示例技術。圖14A至圖14H是根據(jù)各種實施方案的基于一個或多個注意力相關因素改變?nèi)S環(huán)境中人的視覺顯著性的方法的流[0035]下文所描述的過程通過各種技術增強了設備的可操作性并且使用戶-設備界面更高效(例如，通過幫助用戶提供合適輸入并減少操作設備/與設備交互時的用戶錯誤),這些技術包括向用戶提供改進的視覺反饋、減少執(zhí)行操作所需的輸入數(shù)量、提供附加控制選項而不會因附加顯示控件使用戶界面混亂、在已經(jīng)滿足一組條件時執(zhí)行操作而無需進一步的用戶輸入、改善隱私性和/或安全性、在節(jié)省存儲空間時提供更多樣、詳細和/或真實的用戶體驗，和/或附加技術。這些技術還通過使用戶能夠更快且更高效地使用設備而減少了電力使用并延長了設備的電池壽命。節(jié)省電池電量，并且因此節(jié)省重量，改善了設備的人體工程學。這些技術還使得能夠進行實時通信，允許使用更少和/或不太精確的傳感器，從而產(chǎn)生更緊湊、更輕且更便宜的設備，并且使得該設備能夠在各種照明條件下使用。這些技術減少了能量使用，從而減少了由設備發(fā)出的熱量，這對于可穿戴設備特別重要，其中如果完全在設備部件的操作參數(shù)內(nèi)的設備產(chǎn)生太多熱量，則對于用戶來說，穿戴該設備會變得不舒服。[0036]此外，在本文所述的其中一個或多個步驟取決于已滿足一個或多個條件的方法中，應當理解，所述方法可在多次重復中重復，使得在重復的過程中，在方法的不同重復中已滿足決定方法中的步驟的所有條件。例如，如果方法需要進行第一步驟(如果滿足條件),以及進行第二步驟(如果不滿足條件),則普通技術人員將會知道，重復所聲明的步驟，直到滿足條件和不滿足條件兩者(不分先后)。因此，可將被描述為具有取決于已滿足一個或多個條件的一個或多個步驟的方法重寫為重復直到已滿足該方法中所述的每個條件的方法。然而，這不需要系統(tǒng)或計算機可讀介質(zhì)聲明該系統(tǒng)或計算機可讀介質(zhì)包含用于基于對應的一個或多個條件的滿足來進行視情況而定的操作的指令，并且因此能夠確定是否已滿足可能的情況，而無需明確地重復方法的步驟直到已滿足決定方法中的步驟的所有條件。本領域的普通技術人員還將理解，類似于具有視情況而定的步驟的方法，系統(tǒng)或計算機可讀存9儲介質(zhì)可根據(jù)需要多次重復方法的步驟，以確保已進行所有視情況而定的步驟。[0037]在一些實施方案中，如圖1A所示，經(jīng)由包括計算機系統(tǒng)101的操作環(huán)境100向用戶提供XR體驗。計算機系統(tǒng)101包括控制器110(例如，便攜式電子設備的處理器或遠程服務入設備125(例如，眼睛跟蹤設備130、手部跟蹤設備140、出設備155(例如，揚聲器160、觸覺輸出發(fā)生器170和其他輸出設備180)、一個或多個傳感器傳感器、位置傳感器、運動傳感器、速度傳感器等),以及任選地一個或多個外圍設備195(例和外圍設備195中的一者或多者與顯示生成部件120集成(例如，在頭戴式設備或手持式設備中)。[0038]在描述XR體驗時，各種術語用于區(qū)別地指代用戶可以感測并且/或者用戶可以與其進行交互(例如，利用由生成XR體驗的計算機系統(tǒng)101檢測到的輸入進行交互，這些輸入使得生成XR體驗的計算機系統(tǒng)生成與提供給計算機系統(tǒng)101的各種輸入對應的音頻、視覺和/或觸覺反饋)的若干相關但不同的環(huán)境。以下是這些術語的子集：[0039]物理環(huán)境：物理環(huán)境是指人們在沒有電子系統(tǒng)幫助的情況下能夠感測和/或交互的物理世界。物理環(huán)境諸如物理公園包括物理物品，諸如物理樹木、物理建筑物和物理人。人們能夠諸如通過視覺、觸覺、聽覺、味覺和嗅覺來直接感測物理環(huán)境和/或與物理環(huán)境交[0040]擴展現(xiàn)實：相反，擴展現(xiàn)實(XR)環(huán)境是指人們經(jīng)由電子系統(tǒng)感測和/或交互的完全或部分模擬的環(huán)境。在XR中，跟蹤人的物理運動的子集或其表示，并且作為響應，以符合至少一個物理定律的方式調(diào)整在XR環(huán)境中模擬的一個或多個虛擬對象的一個或多個特性。例如，XR系統(tǒng)可以檢測人的頭部轉(zhuǎn)動，并且作為響應，以與此類視圖和聲音在物理環(huán)境中變化的方式類似的方式調(diào)整呈現(xiàn)給人的圖形內(nèi)容和聲場。在一些情況下(例如，出于可達性原因),對XR環(huán)境中虛擬對象的特性的調(diào)整可以響應于物理運動的表示(例如，聲音命令)來進覺和嗅覺。例如，人可以感測音頻對象和/或與音頻對象交互，音頻對象創(chuàng)建3D或空間音頻環(huán)境，3D或空間音頻環(huán)境提供3D空間中點音頻源的感知。又如，音頻對象可以使能音頻透明度，該音頻透明度在有或者沒有計算機生成的音頻的情況下選擇性地引入來自物理環(huán)境的環(huán)境聲音。在某些XR環(huán)境中，人可以感測和/或只與音頻對象交互。[0041]XR的示例包括虛擬現(xiàn)實和混合現(xiàn)實。[0042]虛擬現(xiàn)實：虛擬現(xiàn)實(VR)環(huán)境是指被設計成對于一個或多個感官完全基于計算機生成的感官輸入的模擬環(huán)境。VR環(huán)境包括人可以感測和/或交互的多個虛擬對象。例如，樹木、建筑物和代表人的化身的計算機生成的圖像是虛擬對象的示例。人可以通過在計算機生成的環(huán)境內(nèi)人的存在的模擬和/或通過在計算機生成的環(huán)境內(nèi)人的物理移動的一個子集的模擬來感測和/或與VR環(huán)境中的虛擬對象交互。[0043]混合現(xiàn)實：與被設計成完全基于計算機生成的感官輸入的VR環(huán)境相比，混合現(xiàn)實(MR)環(huán)境是指被設計成除了包括計算機生成的感官輸入(例如，虛擬對象)之外還引入來自物理環(huán)境的感官輸入或其表示的模擬環(huán)境。在虛擬連續(xù)體上，混合現(xiàn)實環(huán)境是完全物理環(huán)境作為一端和虛擬現(xiàn)實環(huán)境作為另一端之間的任何狀況，但不包括這兩端。在一些MR環(huán)境中，計算機生成的感官輸入可以對來自物理環(huán)境的感官輸入的變化進行響應。另外，用于呈現(xiàn)MR環(huán)境的一些電子系統(tǒng)可以跟蹤相對于物理環(huán)境的位置和/或取向，以使虛擬對象能夠與真實對象(即，來自物理環(huán)境的物理物品或其表示)交互。例如，系統(tǒng)可以導致運動使得虛擬樹木相對于物理地面看起來是靜止的。[0044]混合現(xiàn)實的示例包括增強現(xiàn)實和增強虛擬。[0045]增強現(xiàn)實：增強現(xiàn)實(AR)環(huán)境是指其中一個或多個虛擬對象疊加在物理環(huán)境或物理環(huán)境的表示上方的模擬環(huán)境。例如，用于呈現(xiàn)AR環(huán)境的電子系統(tǒng)可具有透明或半透明顯示器，人可以透過該顯示器直接查看物理環(huán)境。該系統(tǒng)可以被配置為在透明或半透明顯示器上呈現(xiàn)虛擬對象，使得人利用該系統(tǒng)感知疊加在物理環(huán)境之上的虛擬對象。另選地，系統(tǒng)可以具有不透明顯示器和一個或多個成像傳感器，該成像傳感器捕獲物理環(huán)境的圖像或視頻，這些圖像或視頻是物理環(huán)境的表示。系統(tǒng)將圖像或視頻與虛擬對象組合，并在不透明顯示器上呈現(xiàn)組合物。人利用系統(tǒng)經(jīng)由物理環(huán)境的圖像或視頻而間接地查看物理環(huán)境，并且感知疊加在物理環(huán)境之上的虛擬對象。如本文所用，在不透明顯示器上顯示的物理環(huán)境的視頻被稱為“透傳視頻”,意味著系統(tǒng)使用一個或多個圖像傳感器捕獲物理環(huán)境的圖像，并且在不透明顯示器上呈現(xiàn)AR環(huán)境時使用那些圖像。進一步另選地，系統(tǒng)可以具有投影系統(tǒng)，該投影系統(tǒng)將虛擬對象投射到物理環(huán)境中，例如作為全息圖或者在物理表面上，使得人利用該系統(tǒng)感知疊加在物理環(huán)境之上的虛擬對象。增強現(xiàn)實環(huán)境也是指其中物理環(huán)境的表示被計算機生成的感官信息進行轉(zhuǎn)換的模擬環(huán)境。例如，在提供透傳視頻中，系統(tǒng)可以對一個或多個傳感器圖像進行轉(zhuǎn)換以施加與成像傳感器所捕獲的視角不同的選擇視角(例如，視點)。又如，物理環(huán)境的表示可以通過圖形地改部分可以是原始捕獲圖像的代表性的但不是真實的版本。再如，物理環(huán)境的表示可以通過以圖形方式消除其部分或?qū)⑵洳糠诌M行模糊處理而進行轉(zhuǎn)換。[0046]增強虛擬：增強虛擬(AV)環(huán)境是指其中虛擬環(huán)境或計算機生成環(huán)境結(jié)合了來自物理環(huán)境的一項或多項感官輸入的模擬環(huán)境。感官輸入可以是物理環(huán)境的一個或多個特性的表示。例如，AV公園可以具有虛擬樹木和虛擬建筑物，但人的臉部是從對物理人拍逼真再現(xiàn)的。又如，虛擬對象可以采用一個或多個成像傳感器所成像的物理物品的形狀或顏色。再如，虛擬對象可以采用符合太陽在物理環(huán)境中的定位的陰影。[0047]在增強現(xiàn)實、混合現(xiàn)實或虛擬現(xiàn)實環(huán)境中，三維環(huán)境的視圖對用戶是可見的。三維環(huán)境的視圖通常經(jīng)由一個或多個顯示生成部件(例如，向同一用戶的不同眼睛提供立體內(nèi)容的顯示器或一對顯示模塊)通過虛擬視口對用戶可見，該虛擬視口具有視口邊界，該視口邊界限定經(jīng)由一個或多個顯示生成部件對用戶可見的三維環(huán)境的范圍。在一些實施方案中，由視口邊界限定的區(qū)域在一個或多個維度上小于用戶的視覺范圍(例如，基于用戶的視覺范圍、一個或多個顯示生成部件的尺寸、光學屬性或其他物理特性、和/或一個或多個顯示生成部件相對于用戶的眼睛的位置和/或取向)。在一些實施方案中，由視口邊界限定的區(qū)域在一個或多個維度上大于用戶的視覺范圍(例如，基于用戶的視覺范圍、一個或多個顯示生成部件的尺寸、光學屬性或其他物理特性、和/或一個或多個顯示生成部件相對于用戶的眼睛的位置和/或取向)。視口和視口邊界通常隨著一個或多個顯示生成部件的移動而移動(例如，對于頭戴式設備隨著用戶的頭部移動，或者對于諸如平板計算機或智能電話之類11的手持式設備隨著用戶的手部移動)。用戶的視點確定在視口中可見的內(nèi)容，視點通常指定相對于三維環(huán)境的位置和方向，并且隨著視點移動，三維環(huán)境的視圖也將在視口中移動。對于頭戴式設備，視點通?；谟脩舻念^部、面部和/或眼睛的的并且在用戶正在使用頭戴式設備時提供沉浸式體驗的三維環(huán)境的視圖。對于手持式或固定式設備，視點隨著手持式或固定式設備的移動和/或隨著用戶相對于手持式或固定式設具有虛擬透傳的顯示生成部件的設備，經(jīng)由一個或多個顯示生成部件可見(例如，顯示和/或投影)的物理環(huán)境的各部分基于與顯示生成部件通信的一個或多個相機的視場，該一個或多個相機通常隨著顯示生成部件的移動而移動(例如，對于頭戴式設備隨著用戶的頭部的移動而移動，或者對于諸如平板計算機或智能電話之類的手持式設備隨著用戶的手部的移動而移動),因為用戶的視點隨著一個或多個相機的視場的移動而移動(并且經(jīng)由一個或多個顯示生成部件顯示的一個或多個虛擬對象的外觀基于用戶的視點來更新(例如，虛擬對象的顯示位置和姿態(tài)基于用戶的視點的移動來更新))。對于具有光學透傳的顯示生成部件，經(jīng)由一個或多個顯示生成部件可見(例如，通過顯示生成部件的一個或多個部分或完全透明部分光學可見)的物理環(huán)境的各部分基于用戶通過顯示生成部件的部分或完全透明部分的視場(例如，對于頭戴式設備隨著用戶頭部的移動而移動，或者對于諸如平板計算機或智能電話之類的手持式設備隨著用戶的手部的移動而移動),因為用戶的視點隨著用戶通過顯示生成部件的部分或完全透明部分的視場的移動而移動(并且一個或多個虛擬對象的外觀基于用戶的視點來更新)。[0048]在一些實施方案中，物理環(huán)境的表示(例如，經(jīng)由虛擬透傳或光學透傳顯示)可被虛擬環(huán)境部分地或完全地遮擋。在一些實施方案中，所顯示的虛擬環(huán)境的量(例如，未顯示的物理環(huán)境的量)基于虛擬環(huán)境的沉浸水平(例如，相對于物理環(huán)境的表示)。例如，增加沉浸水平任選地使得顯示更多的虛擬環(huán)境，替換和/或遮擋更多的物理環(huán)境，并且降低沉浸水平任選地使得顯示更少的虛擬環(huán)境，從而顯露先前未被顯示和/或遮擋的物理環(huán)境的部分。在一些實施方案中，在特定沉浸水平，一個或多個第一背景對象(例如，在物理環(huán)境的表示中)比一個或多個第二背景對象更多地在視覺上被去強調(diào)(例如，變暗淡、變模糊、以增大的透明度顯示),并且一個或多個第三背景對象停止顯示。在一些實施方案中，沉浸水平包括由計算機系統(tǒng)顯示的虛擬內(nèi)容(例如，虛擬環(huán)境和/或虛擬內(nèi)容)遮擋虛擬環(huán)境周圍/后面的背景內(nèi)容(例如，除了虛擬環(huán)境和/或虛擬內(nèi)容之外的內(nèi)容)的相關聯(lián)的程度，任選地包括所顯示的背景內(nèi)容的項目的數(shù)量和/或背景內(nèi)容的所顯示視覺特性(例如，顏色、對比度和/或不透明度),經(jīng)由顯示生成部件顯示的虛擬內(nèi)容的角度范圍(例如，以低沉浸度顯示的內(nèi)容的60度，以中等沉浸度顯示的內(nèi)容的120度，或以高沉浸度顯示的內(nèi)容的180度),和/或由虛擬內(nèi)容占用的經(jīng)由顯示生成部件顯示的視場的比例(例如，由虛擬內(nèi)容以低沉浸度占用的視場的33%,由虛擬內(nèi)容以中等沉浸度占用的視場的66%,或由虛擬內(nèi)容以高沉浸度占用的視場的100%)。在一些實施方案中，背景內(nèi)容被包括在其上顯示有虛擬內(nèi)容的背景中(例如，物理環(huán)境的表示中的背景內(nèi)容)。在一些實施方案中，背景內(nèi)容包括用戶界面(例如，由計算機系統(tǒng)生成的與應用相對應的用戶界面)、不與虛擬環(huán)境和/或虛擬內(nèi)容相關聯(lián)或不包括在虛擬環(huán)境和/或虛擬內(nèi)容中的虛擬對象(例如，由計算機系統(tǒng)生成的文件或其他用戶的表示等),和/或真實對象(例如，表示用戶周圍的物理環(huán)境中的真實對象的透傳對象，這些透傳對象可見，使得它們經(jīng)由顯示生成部件顯示和/或經(jīng)由顯示生成部件的透明或半透明部件可見，因為計算機系統(tǒng)不遮擋/妨礙它們透過顯示生成部件的可見性)。在一些實施方案中，在低沉浸水平(例如，第一沉浸水平),背景、虛擬和/或真實對象以不被遮擋的方式顯示。例如，具有低沉浸水平的虛擬環(huán)境任選地與背景內(nèi)容同時顯示，該背景內(nèi)容任選地以全亮度、顏色和/或半透明度顯示。在一些實施方案中，在較高沉浸水平(例如，高于第一沉浸水平的第二沉浸水平),背景、虛擬和/或真實對象以被遮擋的方式顯示(例如，變暗淡、變模糊或從顯示器移除)。例如，顯示具有高沉浸水平的相應虛擬環(huán)境而不同時顯示背景內(nèi)容(例如，在全屏或完全沉浸模式中)。又如，以中等沉浸水平顯示的虛擬環(huán)境與變暗、變模糊或以其他方式被去強調(diào)的背景內(nèi)容同時顯示。在一些實施方案中，背景對象的視覺特性在背景對象之間有所不同。例如，在特定沉浸水平，一個或多個第一背景對象比一個或多個第二背景對象更多地在視覺上被去強調(diào)(例如，變暗淡、變模糊和/或以增大的透明度顯示),并且一個或多個第三背景對象停止顯示。在一些實施方案中，零沉浸度或零沉浸水平對應于停止顯示的虛擬環(huán)境，并且替代地顯示物理環(huán)境的表示(任選地具有一個或多個虛擬對象，諸如應用、窗口或虛擬三維對象),而物理環(huán)境的表示不被虛擬環(huán)境遮擋。使用物理輸入元素調(diào)整沉浸水平提供了調(diào)整沉浸度的快速且高效的方法，這增強了計算機系統(tǒng)的可操作性并且使得用戶-設備界面更高效。[0049]視點鎖定的虛擬對象：當計算機系統(tǒng)在用戶視點中的相同位置和/或定位處顯示虛擬對象時，即使用戶的視點偏移(例如，發(fā)生變化),虛擬對象也是視點鎖定的。在其中計算機系統(tǒng)是頭戴式設備的實施方案中，用戶的視點被鎖定到用戶的頭部的前向方向(例如，當用戶直視前方時，用戶的視點是用戶視場的至少一部分);因此，在不移動用戶的頭部的情況下，即使在用戶的注視偏移時，用戶的視點也保持固定。在其中計算機系統(tǒng)具有可相對于用戶的頭部重新定位的顯示生成部件(例如，顯示屏幕)的實施方案中，用戶的視點是在計算機系統(tǒng)的顯示生成部件上呈現(xiàn)給用戶的增強現(xiàn)實視圖。例如，當用戶的視點處于第一取向(例如，用戶頭部面向北)時顯示在用戶的視點的左上角中的視點鎖定的虛擬對象繼續(xù)顯示在用戶的視點的左上角中，即使在用戶的視點改變到第二取向(例如，用戶頭部面向西)時也是如此。換句話講，在用戶的視點中顯示視點鎖定的虛擬對象的位置和/或定位與用戶在物理環(huán)境中的定位和/或取向無關。在其中計算機系統(tǒng)是頭戴式設備的實施方案中，用戶的視點被鎖定到用戶的頭部的取向，使得虛擬對象也被稱為“頭部鎖定虛擬對象”。[0050]環(huán)境鎖定的視覺對象：當計算機系統(tǒng)在用戶的視點中的位置和/或定位處顯示虛擬對象時，虛擬對象是環(huán)境鎖定的(另選地，“世界鎖定的”),該位置和/或定位基于三維環(huán)境(例如，物理環(huán)境或虛擬環(huán)境)中的位置和/或?qū)ο?例如，參考該位置和/或?qū)ο蠖x擇和/或錨定到該位置和/或?qū)ο?。隨著用戶的視點移動，環(huán)境中相對于用戶的視點的位置和/或?qū)ο蟾淖儯@導致環(huán)境鎖定的虛擬對象顯示在用戶視點中的不同位置和/或定位處。例如，鎖定到緊接在用戶前面的樹木上的環(huán)境鎖定的虛擬對象顯示在用戶的視點的中心處。當用戶的視點向右偏移(例如，用戶頭部向右轉(zhuǎn)動)使得樹木現(xiàn)在在用戶的視點中處于中心左側(cè)(例如，用戶的視點中的樹木定位偏移)時，鎖定到樹木上的環(huán)境鎖定的虛擬對象在用戶的視點中顯示在中心左側(cè)。換句話講，在用戶的視點中顯示環(huán)境鎖定的虛擬對象的位置和/或定位取決于環(huán)境中虛擬對象被鎖定到其上的位置和/或?qū)ο蟮亩ㄎ缓?或取向。在一些實施方案中，計算機系統(tǒng)使用靜止的參照系(例如，在物理環(huán)境中錨定到固定位置和/或?qū)ο蟮淖鴺讼?,以便確定在用戶的視點中顯示環(huán)境鎖定的虛擬對象的定位。環(huán)境鎖定的虛擬對象可被鎖定到環(huán)境的靜止部分(例如，地板、墻壁、桌子或其他靜止對象),或可被鎖定到環(huán)境的可移動部分(例如，車輛、動物、人或甚至獨立于用戶的視點移動的用戶身體的一部分諸如用戶的手部、手腕、手臂或腳的表示)使得虛擬對象隨著視點或環(huán)境的該部分移動而移動以保持虛擬對象和環(huán)境的該部分之間的固定關系。[0051]在一些實施方案中，環(huán)境鎖定或視點鎖定的虛擬對象表現(xiàn)出惰性跟隨行為，其相對于虛擬對象所跟隨的參考點的移動而減少或延遲環(huán)境鎖定或視點鎖定的虛擬對象的運動。在一些實施方案中，在表現(xiàn)出惰性跟隨行為時，當檢測到虛擬對象正在跟隨的參考點移動時，計算機系統(tǒng)有意地延遲虛擬對象的移動。例如，當參考點(例如，環(huán)境的該部分或視點)以第一速度移動時，虛擬對象被設備移動以保持鎖定到參考點，但以相比于第一速度更慢的第二速度移動(例如，直到參考點停止移動或減慢，在該點處虛擬對象開始趕上參考點)。在一些實施方案中，當虛擬對象表現(xiàn)出惰性跟隨行為時，設備忽略參考點的少量移動參考點(例如，虛擬對象被鎖定到的環(huán)境的部分或視點)移動第一量時，參考點和虛擬對象之間的距離增大(例如，因為虛擬對象正被顯示以便保持相對于與虛擬對象被鎖定到的參考點不同的視點或環(huán)境的部分固定或基本上固定的位置),并且當參考點(例如，虛擬對象被鎖定到的環(huán)境的部分或視點)移動大于第一量的第二量時，參考點和虛擬對象之間的距離先增大(例如，因為虛擬對象正被顯示以便保持相對于與虛擬對象被鎖定到的參考點不同的視點或環(huán)境的部分固定或基本上固定的位置),然后在參考點的移動量增大到閾值(例如，“惰性跟隨”閾值)以上時減小，因為虛擬對象被計算機系統(tǒng)移動以保持相對于定或基本上固定的位置。在一些實施方案中，虛擬對象保持相對于參考點基本上固定的定位包括虛擬對象在一個或多個維度(例如，相對于參考點的定位的上/下、左/右和/或向前/[0052]硬件：有許多不同類型的電子系統(tǒng)使人能夠感測各種XR環(huán)境和/或與各種XR環(huán)境輛擋風玻璃、集成有顯示能力的窗戶、被形成為被設計用于放置在人的眼睛上的透鏡的顯反饋的可穿戴或手持控制器)、智能電話、平板設備和臺式/膝上型計算機。頭戴式系統(tǒng)可以具有一個或多個揚聲器和集成的不透明顯示器。另選地，頭戴式系統(tǒng)可以被配置為接受外部不透明顯示器(例如，智能電話)。頭戴式系統(tǒng)可以結(jié)合用于捕獲物理環(huán)境的圖像或視頻的一個或多個成像傳感器和/或用于捕獲物理環(huán)境的音頻的一個或多個麥克風。頭戴式系統(tǒng)可以具有透明或半透明顯示器，而不是不透明顯示器。透明或半透明顯示器可以具有媒介，代表圖像的光通過該媒介被引導到人的眼睛。顯示器可以利用數(shù)字光投影、OLED、LED、光學組合器、光學反射器、或它們的任意組合。在一個實施方案中，透明或半透明顯示器可被配置為選擇性地變得不透明。基于投影的系統(tǒng)可以采用將圖形圖像投影到人的視網(wǎng)膜上的視網(wǎng)膜投影技術。投影系統(tǒng)也可被配置為將虛擬對象投影到物理環(huán)境中，例如作為全息圖或在物理表面上。在一些實施方案中，控制器110被配置為管理和協(xié)調(diào)用戶的XR體驗。在一些實施方案中，控制器110包括軟件、固件和/或硬件的合適組合。下文相對于圖2更詳細地描述了控制器110。在一些實施方案中，控制器110是相對于場景105(例如，物理環(huán)境)處于本地或遠程位置的計算設備。例如，控制器110是位于場景105內(nèi)的本地服務器。又如，控制器110是位于場景105之外的遠程服務器(例如，云服務器、中央服務器等)。在一些實施方個或多個處理器的便攜式電子設備等)、輸入設備125中的一個或多個輸入設備、輸出設備155中的一個或多個輸出設備、傳感器190中的一個或多個傳感器和/或外圍裝設備195中的一個或多個外圍裝設備的殼體(例如，物理外殼)內(nèi)，或者與上述設備中的一者或多者共享相同的物理殼體或支撐結(jié)構(gòu)。[0053]在一些實施方案中，顯示生成部件120被配置為向用戶提供XR體驗(例如，至少XR體驗的視覺組成部分)。在一些實施方案中，顯示生成部件120包括軟件、固件和/或硬件的合適組合。下文相對于圖3更詳細地描述了顯示生成部件120。在一些實施方案中，控制器110的功能由顯示生成部件120提供和/或與該顯示生成部件組合。[0054]根據(jù)一些實施方案，當用戶虛擬地和/或物理地存在于場景105內(nèi)時，顯示生成部件120向用戶提供XR體驗。[0055]在一些實施方案中，顯示生成部件穿戴在用戶身體的一部分上(例如，他/她的頭部上、他/她的手上等)。這樣，顯示生成部件120包括被提供用于顯示XR內(nèi)容的一個或多個XR顯示器。例如，在各種實施方案中，顯示生成部件120包圍用戶的視場。在一些實施方案中，顯示生成部件120是被配置為呈現(xiàn)XR內(nèi)容的手持式設備(諸如智能電話或平板設備),并且用戶握持具有朝向用戶的視場的顯示器和朝向場景105的相機的設備。在一些實施方案中，手持式設備被任選地放置在穿戴在用戶的頭部上的殼體內(nèi)。在一些實施方案中，手持式設備被任選地放置在用戶前面的支撐件(例如，三腳架)上。在一些實施方案中，顯示生成部件120是被配置為呈現(xiàn)XR內(nèi)容的XR室、殼體或房間，其中用戶不穿戴或握持顯示生成部件120.參考用于顯示XR內(nèi)容的一種類型的硬件(例如，手持式設備或三腳架上的設備)描述的許多用戶界面可以在用于顯示XR內(nèi)容的另一種類型的硬件(例如，HMD或其他可穿戴計算設備)上實現(xiàn)。例如，示出基于發(fā)生在手持式設備或三腳架安裝的設備前面的空間中的交互而間中，并且對XR內(nèi)容的響應經(jīng)由HMD來顯示。類似地，示出基于手持式設備或三腳架安裝的設備相對于物理環(huán)境(例如，場景105或用戶身體的一部分(例如，用戶的眼睛、頭部或手))的移動而觸發(fā)的與XR內(nèi)容的交互的用戶界面可以類似地用HMD來實現(xiàn)，其中移動是由HMD相對于物理環(huán)境(例如，場景105或用戶身體的一部分(例如，用戶的眼睛、頭部或手))的移動引起的。[0056]盡管在圖1A中示出了操作環(huán)境100的相關特征，但本領域的普通技術人員將從本公開中認識到，為了簡潔起見并且為了不模糊本文所公開的示例實施方案的更多相關方[0057]圖1A至圖1P示出了用于執(zhí)行方法并且提供音頻、視覺和/或觸覺反饋作為本文所述的用戶界面的一部分的計算機系統(tǒng)的各種示例。在一些實施方案中，計算機系統(tǒng)包括用于向計算機系統(tǒng)的用戶顯示任選地基于檢測到的事件和/或由計算機系統(tǒng)檢測到的用戶輸1-120a和第二顯示組件1-120b和/或第一光學模塊11.1.1-104a和第二光學模塊11.1.1-示出的許多用戶界面示出了用戶界面的單個視圖，但HMD中的用戶界面任選地使用兩個光學模塊(例如，第一顯示組件1-120a和第二顯示組件1-120b和/或第一光學模塊11.1.1-104a和第二光學模塊11.1.1-104b)來顯示，一個光學模塊用于用戶的右眼并且模塊用于用戶的左眼，并且向兩個不同的眼睛呈現(xiàn)略微不同的圖像以生成立體深度的錯機系統(tǒng)未被穿戴時)和/或向計算機系統(tǒng)附近的其他人顯示計算機系統(tǒng)的狀態(tài)信息的一個或多個外部顯示器(例如，顯示組件1-108),該狀態(tài)信息任選地基于檢測到的事件和/或由姿(例如，位置和/或取向),使得虛擬對象可基于物理對象和/或表面的檢測到的位姿而被或多個傳感器),這些傳感器可用于(任選地結(jié)合一個或多個照明器，諸如圖1I中所述的照1I中的眼睛跟蹤和注視跟蹤傳感器),這些傳感器可用于(任選地結(jié)合一個或多個燈，諸如圖10中的燈11.3.2-110)確定注意力或注視位置和/或注視移動，這些位置和/或移動可任選地用于基于注視移動和/或停留來檢測僅注視的輸入。上述各種傳感器的組合可用于確定用戶面部表情和/或手部運動以用于生成用戶的化身或表示，諸如用于實時通信會話的跟蹤信息組合以基于直接和/或間接輸入來確定用戶與一個或多個用戶界面之間的交互，該直接和/或間接輸入諸如空中手勢或使用一個或多個硬件輸入設備的輸入，該硬件輸入按鈕1-128、按鈕11.1.1-114、第二按鈕1-132和/或撥盤或按鈕1-328)任選地用于執(zhí)行系統(tǒng)操作，諸如重新居中對設備的用戶可見的三維環(huán)境中的內(nèi)容、顯示用于啟動應用的主用戶界面、開始實時通信會話、或發(fā)起虛擬三維背景的顯示?？膳まD(zhuǎn)或可旋轉(zhuǎn)的第一按鈕1-128、按鈕11.1.1-114和/或撥盤或按鈕1-328)任選地可旋轉(zhuǎn)以調(diào)整視覺內(nèi)容的參數(shù)，諸如虛擬三維環(huán)境的沉浸水平(例如，虛擬內(nèi)容在三維環(huán)境中占據(jù)用戶視口的程度)或與三維環(huán)境和經(jīng)由光學模塊(例如，第一顯示組件1-120a和第二顯示組件1-120b和/或第一光學模塊11.1.1-104a和第二光學模塊11.1.1-104b)顯示的虛擬內(nèi)容相關聯(lián)的其他參數(shù)。[0058]圖1B示出了被配置為由用戶穿戴并且提供虛擬和改變/混合現(xiàn)實(VR/AR)體驗的可頭戴式顯示(HMD)設備1-100的示例的前視元1-102或組件、連接到顯示單元1-102并從該顯示單元延伸的電子條帶組件1-104,以及在任一端固定到電子條帶組件1-104的帶組件1-106。電子條帶組件1-104和帶1-106可以是保持組件的一部分，該保持組件被配置為纏繞在用戶的頭部周圍以保持顯示單元1-102抵靠用戶的面部。[0059]在至少一個示例中，帶組件1-106可包括被配置為纏繞在用戶的頭部后側(cè)的第一帶1-116和被配置為在用戶的頭部的頂部上方延伸的第二帶1-117。如圖所示，第二帶可在電子條帶組件1-104的第一電子條帶1-105a與第二電子條帶1-105b之間延伸。條帶組件1-104和帶組件1-106可以是固定機構(gòu)的一部分，該固定機構(gòu)從顯示單元1-102向后延伸并且被配置為保持顯示單元1-102抵靠用戶的面部。[0060]在至少一個示例中，固定機構(gòu)包括第一電子條帶1-105a,該第一電子條帶包括耦接到顯示單元1-102(例如，顯示單元1-102的外殼1-150)的第一近端1-134和與第一近端1-134相對的第一遠端1-136。固定機構(gòu)還可包括第二電子條帶1-105b,該第二電子條帶包括耦接到顯示單元1-102的外殼1-150的第二近端1-138和與第二近端1-138相對的第二遠端1-140。固定機構(gòu)還可包括第一帶1-116和第二帶1-117,第一帶包括耦接到第一遠端1-136的第一端1-142以及耦接到第二遠端1-140的第二端1-144,并且第二帶在第一電子條帶1-105a與第二電子條帶1-105b之間延伸。條帶1-105a-b和帶1-116可經(jīng)由連接機構(gòu)或組件1-114耦接。在至少一個示例中，第二帶1-117包括在第一近端1-134與第一遠端1-136之間耦接到第一電子條帶1-105a的第一端1-146以及在第二近端1-138與第二遠端1-140之間耦接到第二電子條帶1-105b的第二端1-148。[0061]在至少一個示例中，第一和第二電子條帶1-105a-b包括塑料、金屬或形成基本上剛性的條帶1-105a-b形狀的其他結(jié)構(gòu)材料。在至少一個示例中，第一帶1-116和第二帶1-117由包括編織紡織品、橡膠等的彈性柔性材料形成。第一帶1-116和第二帶1-117可以是柔性的以在穿戴HMD1-100時適形于用戶頭部的形狀。[0062]在至少一個示例中，第一和第二電子條帶1-105a-b中的一者或多者可限定內(nèi)部條帶體積并且包括設置在內(nèi)部條帶體積中的一個或多個電子部件。在一個示例中，如圖1B所示，第一電子條帶1-105a可包括電子部件1-112。在一個示例中，電子部件1-112可包括揚聲[0063]在至少一個示例中，外殼1-150限定了第一前置開口1-152。前置開口在圖1B中以虛線標記為1-152,這是因為顯示組件1-108被設置成在組裝HMD1-100時從視場中遮蔽第一開口1-152.外殼1-150還可限定后置第二開口1-154.外殼1-150還限定了第一開口1-152顯示組件可包括設置在前開口1-152中或跨該前開口以遮蔽前開口1-152的前蓋和顯示屏彎曲以與用戶的面部特征和從面部的一側(cè)到另一側(cè)的總體曲率互補，例如從左到右和/或[0064]在至少一個示例中，外殼1-150可限定第一開口1-152與第二開口1-154之間的第設置在第一孔1-128中的第一按鈕1-126,以及設置在第二孔1-130中的第二按鈕1-132。第第一按鈕1-126和/或第二按鈕1-132可以是可扭轉(zhuǎn)撥盤以及可按壓按鈕。在至少一個示例150圍繞外殼1-150的周邊向后延伸的光密封件1-110,如圖所示。光密封件1-110可被配置HMD1-100可包括第一顯示組件1-120a和第二顯示組件1-120b,這些顯示組件設置在由外殼1-150限定的面向后的第二開口1-154處或其中和/或設置在外殼1-150的內(nèi)部體積中并相應的顯示屏幕1-122a、1-122b,這些顯示屏幕被配置為在向后方向上通過第二開口1-154(包括其布置和配置)可單獨地或以任何組合方式包括在圖1B和圖1C所示的設備、特征部、[0069]此外，HMD1-200可包括被配置為可移除地耦接到顯示單元1-202的光密封件1-210.HMD1-200還可包括透鏡1-218,該透鏡可例如在包括顯示屏幕的第一組件和第二顯示組件上可移除地耦接到顯示單元1-202。透鏡1-218可包括被配置用于矯正視力的定制處方透鏡。如所指出的那樣，在圖1D的分解視圖中示出并且在上文描述的每個零件能夠可移除地耦接、附接、重新附接以及更換以更新零件或者為不同的用戶換出零件。例如，帶諸如帶1-216、光密封件諸如光密封件1-210、透鏡諸如透鏡1-218,以及電子條帶諸如電子條帶1-205a-b可根據(jù)用戶而被換出，使得這些部分被定制為貼合并且對應于HMD1-200的單個用[0070]圖1D所示的特征部、部件和/或零件中的任一者(包括其布置和配置)可單獨地或以任何組合方式包括在圖1B、圖1C和圖1E至圖1F所示和本文所述的設備、特征部零件中的任一者(包括其布置和配置)可單獨地或以任何組合方式包括在圖1D所示的設備、[0071]圖1E示出了HMD的顯示單元1-306的示例的分解圖。顯示單元1-306可包括前顯示組件1-308、框架/外殼組件1-350和幕簾組件1-324.顯示單元1-306還可包括設置在框架組件1-350與前顯示組件1-308之間的傳感器組件1-356、邏輯板組件1-358和冷卻組件1-360。在至少一個示例中，顯示單元1-306還可包括后置顯示組件1-320,該后置顯示組件包括設置在框架1-350與幕簾組件1-324之間的第一后置顯示屏幕1-322a和第二后置顯示屏幕1-[0072]在至少一個示例中，顯示單元1-306還可包括馬達組件1-362,該馬達組件被配置作為用于調(diào)整顯示組件1-320的顯示屏幕1-322a-b相對于框架1-350的位置的調(diào)整機構(gòu)。在至少一個示例中，顯示組件1-320機械地耦接到馬達組件1-362,每個顯示屏幕1-322a-b具有至少一個馬達，使得馬達能夠平移顯示屏幕1-322a-b以匹配用戶的眼睛的瞳孔間距。[0073]在至少一個示例中，顯示單元1-306可包括撥盤或按鈕1-328,該撥盤或按鈕可相對于框架1-350按壓并且可由框架1-350外部的用戶訪問。按鈕1-328可經(jīng)由控制器電連接到馬達組件1-362,使得按鈕1-328可由用戶操縱以使得馬達組件1-362的馬達調(diào)整顯示屏幕1-322a-b的位置。[0074]圖1E所示的特征部、部件和/或零件中的任一者(包括其布置和配置)可單獨地或以任何組合方式包括在圖1B至圖1D和圖1F所示和本文所述的設備、特征部、部件和零件的任何其他示例中。同樣，參考圖1B至圖1D和圖1F所示和所述的特征部、部件和/或零件中的任一者(包括其布置和配置)可單獨地或以任何組合方式包括在圖1E所示的設備、特征部、部件和零件的示例中。[0075]圖1F示出了類似于本文所述的其他HMD設備的HMD設備的顯示單元1-406的另一示例的分解圖。顯示單元1-406可包括前顯示組件1-402、傳感器組件1-456、邏輯板組件1-458、冷卻組件1-460、框架組件1-450、后置顯示組件1-421和幕簾組件1-424.顯示單元1-406還可包括馬達組件1-462,該馬達組件用于調(diào)整后置顯示組件1-421的第一顯示子組件1-420a和第二顯示子組件1-420b的位置，包括用于瞳孔間調(diào)整的第一相應顯示屏幕和第二[0076]圖1F的分解圖所示的各種零件、系統(tǒng)和組件在本文中參考圖1B至圖1E以及本公開中所參考的后續(xù)圖更詳細地描述。圖1F所示的顯示單元1-406可與圖1B至圖1E所示的固定機構(gòu)組裝和集成，該固定機構(gòu)包括電子條帶、帶以及包括光密封件、連接組件等的其他部件。[0077]圖1F所示的特征部、部件和/或零件中的任一者(包括其布置和配置)可單獨地或以任何組合方式包括在圖1B至圖1E所示和本文所述的設備、特征部、部件和零件的任何其他示例中。同樣，參考圖1B至圖1E所示和所述的特征部、部件和/或零件中的任一者(包括其布置和配置)可單獨地或以任何組合方式包括在圖1F所示的設備、特征部、部件和零件的示例中。HMD3-100的前蓋組件3-1或本文所示和所述的任何其他HMD設備。圖1G所示的前蓋組件3-板或陣列3-110的顯示組件3-108,以及結(jié)構(gòu)裝飾件3-112。粘合劑層3-106可將護罩3-104和/或透明蓋3-102固定到顯示組件3-108和/或裝飾件3-112。裝飾件3-112可將前蓋組件3-[0079]在至少一個示例中，如圖1G所示，包括雙凸透鏡陣列3-110的透明蓋3-102、護罩3-104和顯示組件3-108可被彎曲以適應用戶面部的曲率。透明蓋3-102和護罩3-104可在兩個或三個維度上彎曲，例如，在Z-X平面內(nèi)外沿Z方向豎直彎曲，在Z-X平面內(nèi)外沿X方向水平彎曲。在至少一個示例中，顯示組件3-108可包括雙凸透鏡陣列3-110以及具有像素的顯示面板，這些像素被配置為通過護罩3-104和透明蓋3-102投射光。顯示組件3-108可在至少一個方向(例如，水平方向)上彎曲，以適應用戶的面部從面部的一側(cè)(例如，左側(cè))到另一側(cè)(例如，右側(cè))的曲率。在至少一個示例中，顯示組件3-108的每個層或部件(其將在隨后的附圖中示出并且更詳細地描述，但是其可包括雙凸透鏡陣列3-110和顯示層)可在水平方向上類似地或同心地彎曲以適應用戶面部的曲率。[0080]在至少一個示例中，護罩3-104可包括透明或半透明材料，顯示組件3-108通過該透明或半透明材料投射光。在一個示例中，護罩3-104可包括一個或多個不透明部分，例如在護罩3-104的背面上的不透明墨印刷部分或其他不透明膜部分。當HMD設備被穿戴時，后表面可以是護罩3-104面向用戶的眼睛的表面。在至少一個示例中，不透明部分可以在護罩3-104的與后表面相對的前表面上。在至少一個示例中，護罩3-104的一個或多個不透明部分可包括周邊部分，該周邊部分在視覺上隱藏圍繞顯示組件3-108的顯示屏幕的外周邊的任何部件。以這種方式，護罩的不透明部分隱藏了HMD設備的原本會通過透明或半透明蓋3-102和/或護罩3-104可見的任何其他部件，包括電子部件、結(jié)構(gòu)部件等。[0081]在至少一個示例中，護罩3-104可限定一個或多個孔透明部分3-120,傳感器可通過這些孔透明部分發(fā)送和接收信號。在一個示例中，部分3-120是孔，傳感器可延伸通過該孔或者通過該孔發(fā)送和接收信號。在一個示例中，部分3-120是透明部分，或者比護罩的周圍半透明或不透明部分更加透明的部分，通過這些部分，傳感器可通過護罩并通過透明蓋備的任何其他視覺或非視覺環(huán)境傳感器。[0082]圖1G所示的特征部、部件和/或零件中的任一者(包括其布置和配置)可單獨地或以任何組合方式包括在本文所述的設備、特征部、部件和零件的任何其他示例中。同樣，本文所示和所述的特征部、部件和/或零件中的任一者(包括其布置和配置)可單獨地或以任統(tǒng)6-102,該傳感器陣列或系統(tǒng)包括安裝到HMD6-100的一個或多個部件的一個或多個傳感器、相機、投影儀等。在至少一個示例中，傳感器系統(tǒng)6-102可包括托架1-3102的一個或多個傳感器可固定/緊固在該托架上。[0084]圖1I示出了包括前透明蓋6-104和傳感器系統(tǒng)6-102的HMD設備6-100的一部分。傳感器系統(tǒng)6-102可包括多個不同的傳感器、發(fā)射透明蓋6-104被示出在傳感器系統(tǒng)6-102的前面，以示出各種傳感器和發(fā)射器的相對位置以下”以及類似術語是指如圖1J所示的Z軸所指示的取向或方向。術語諸如“向前”、“向后”、[0085]在至少一個示例中，透明蓋6-104可限定HMD設備6-100的前外表面，并且包括各種傳感器及其部件的傳感器系統(tǒng)6-102可在Y軸/方向上設置在蓋6-104的后面。蓋6-104可以是透明的或半透明的，以允許光穿過蓋6-104,包括由傳感器系統(tǒng)6-102檢測到的光和由此發(fā)射的光兩者。[0086]如本文其他地方所述，HMD設備6-100可包括一個或多個控制器，這些控制器包括用于將傳感器系統(tǒng)6-102的各種傳感器和發(fā)射器與一個或多個母板、處理單元和其他電子設備諸如顯示屏等電耦接的處理器。此外，如以下將參考其他附圖更詳細地示出，傳感器系統(tǒng)6-102的各種傳感器、發(fā)射器和其他部件可耦接到圖1I中未示出的HMD設備6-100的各種結(jié)構(gòu)框架構(gòu)件、托架等。為了清楚起見，圖1I示出了傳感器系統(tǒng)6-102的部件與其他部件未附接并且未電耦接。[0087]在至少一個示例中，該設備可包括一個或多個控制器，這些控制器具有被配置為執(zhí)行存儲在電耦接到處理器的存儲器部件上的指令的處理器。這些指令可包括或使得處理器執(zhí)行一個或多個算法，這些算法用于隨時間的推移隨著相機的初始位置、角度或方向由于意外掉落事件或其他事件而發(fā)生碰撞或變形來自我校正本文所述的各種相機的角度和[0088]在至少一個示例中，傳感器系統(tǒng)6-102可包括一個或多個場景相機6-106。系統(tǒng)6-102可包括兩個場景相機6-102,分別設置在HMD設備6-100的鼻梁或拱形結(jié)構(gòu)的兩側(cè)，使得這兩個相機6-106中的每一者大致對應于用戶在蓋6-103后面的左眼和右眼的位置。在至少一個示例中，場景相機6-106通常在Y方向上向前取向以在HMD6-100的使用期間捕獲用戶用于MR視頻透傳的圖像和內(nèi)容到面向用戶的眼睛的顯示屏幕。場景相機6-106還可用于環(huán)境和對象重建。[0089]在至少一個示例中，傳感器系統(tǒng)6-102可包括通常在Y方向上向前指向的第一深度傳感器6-108。在至少一個示例中，第一深度傳感器6-108可用于環(huán)境和對象重建以及用戶的手部和身體跟蹤。在至少一個示例中，傳感器系統(tǒng)6-102可包括沿著HMD設備6-100的寬度(例如，沿著X軸)居中設置的第二深度傳感器6-110。例如，第二深度傳感器6-110可被設置在中央鼻梁上方或用戶穿戴HMD6-100時鼻子上方的適配結(jié)構(gòu)上。在至少一個示例中，第二深度傳感器6-110可用于環(huán)境和對象重建以及手部和身體跟蹤。在至少一個示例中，第二深度傳感器可包括LIDAR傳感器。[0090]在至少一個示例中，傳感器系統(tǒng)6-102可包括深度投影儀6-112,該深度投影儀通常面向前以將電磁波(例如，以預先確定的光點圖案的形式)投射到用戶和/或場景相機6-106的視場中或視場內(nèi)，或者投射到包括并且超出用戶和/或場景相機6-106的視場的視場中或視場內(nèi)。在至少一個示例中，深度投影儀能夠以點光圖案的形式投射光的電磁波，這些電磁波從對象反射并回到上述深度傳感器中，包括深度傳感器6-108、6-110。在至少一個示例中，深度投影儀6-112可用于環(huán)境和對象重建以及手部和身體跟蹤。[0091]在至少一個示例中，傳感器系統(tǒng)6-102可包括面向下的相機6-114,其視場通常在Z軸上相對于HDM設備6-100指向下。在至少一個示例中，向下相機6-114可如圖所示設置在HMD設備6-100的左側(cè)和右側(cè)上并且用于手部和身體跟蹤、頭戴式耳機跟蹤以及面部化身檢測和創(chuàng)建以用于在本文其他地方所述的HMD設備6-100的前向顯示屏幕上顯示用戶化身。例如，向下相機6-114可用于捕獲HMD設備6-100下方的用戶面部的面部表情和移動，包括臉[0092]在至少一個示例中，傳感器系統(tǒng)6-102可包括下頜相機6-116。在至少一個示例中，下頜相機6-116可如圖所示設置在HMD設備6-100的左側(cè)和右側(cè)上并且用于手部和身體跟蹤、頭戴式耳機跟蹤以及面部化身檢測和創(chuàng)建以用于在本文其他地方所述的HMD設備6-100的前向顯示屏幕上顯示用戶化身。例如，下頜相機6-116可用于捕獲HMD設備6-100下方的用式耳機跟蹤和面部化身[0093]在至少一個示例中，傳感器系統(tǒng)6-102可包括側(cè)相機6-118。側(cè)相機6-118可被取向6-118可用于手部和身體跟蹤、頭戴式耳機跟蹤以及面部化身檢測和重新創(chuàng)建。[0094]在至少一個示例中，傳感器系統(tǒng)6-102可包括用于在使用期間和/或使用之前確定身份、狀態(tài)和用戶的眼睛的注視方向的多個眼睛跟蹤和注視跟蹤傳感器。在至少一個示例中，眼睛/注視跟蹤傳感器可包括鼻眼相機6-120,該鼻眼相機被設置在用戶的鼻子的任一側(cè)上，并且在穿戴HMD設備6-100時鄰近用戶的鼻子。眼睛/注視傳感器還可包括設置在相應用戶眼睛下方的用于捕獲眼睛的圖像以用于面部化身檢測和創(chuàng)建、注視跟蹤和虹膜標識功能的底部眼睛相機6-122。[0095]在至少一個示例中，傳感器系統(tǒng)6-102可包括紅外照明器6-124,該紅外照明器從HMD設備6-100向外指向以利用IR光照射外部環(huán)境以及其中的任何對象，以便利用傳感器系統(tǒng)6-102的一個或多個IR傳感器進行IR檢測。在至少一個示例中，傳感器系統(tǒng)6-102可包括閃爍傳感器6-126和環(huán)境光傳感器6-128。在至少一個示例中，閃爍傳感器6-126可檢測頂燈光刷新速率以避免顯示器閃爍。在一個示例中，紅外照明器6-124可包括發(fā)光二極管，并且可特別地用于低光環(huán)境，以用于在低光中照射用戶的手部和其他對象，以便由傳感器系統(tǒng)6-102的紅外傳感器檢測。[0096]在至少一個示例中，多個傳感器(包括場景相機6-106、向下相機6-114、下頜相機6-116、側(cè)相機6-118、深度投影儀6-112和深度傳感器6-108、6-110)可與電耦接控制器組合使用，以將深度數(shù)據(jù)與相機數(shù)據(jù)組合，用于手部跟蹤和用于尺寸確定，以便更好地進行HMD設備6-100的手部跟蹤以及對象識別和跟蹤功能。在至少一個示例中，上文所述并在圖1I中示出的向下相機6-114、下頜相機6-116和側(cè)相機6-118可以是能夠在可見和紅外光譜中工作的廣角相機。在至少一個示例中，這些相機6-114、6-116、6-118以簡化圖像處理并獲得靈敏度。[0097]圖1I所示的特