AR/VR的存在，顛覆了電腦、手機等2D平臺顯示內容的形式，其控制器也比傳統的鍵盤鼠標更支持體感交互。那么未來的AR/VR交互還將如何演變？今天，美國專利商標局發布的一項蘋果新專利就展示了一種結合眼球追蹤、語音助手、觸控、手勢和姿態識別等多種功能的頭顯控制方案。
蘋果在專利中寫道，該方案也可用于臺式機、筆記本電腦、平板電腦、手機等常用設備，但在AR/VR頭顯中應用體驗感更好。為了實現對周圍環境和物體的追蹤識別，頭顯將搭載多個圖像傳感器，比如：CCD感光元件、CMOS傳感器、紅外傳感器（被動或主動）、深度傳感器等。
除此之外，蘋果在專利中重點介紹的是利用眼球追蹤、手勢等方式進行選擇和確認的自然交互界面。
比如，你可以通過眼球的移動、眨眼、注視等動作來操作設備，還可以利用注視點來設定AR/VR應用的初始位置和方向。為了提升交互的自然感，界面中的功能可搭配一些提示信號，讓你在看到門把手的時候知道要開門，看到聽筒符號知道要接電話。
當你的注視點方向和深度與特定功能匹配，該功能符號或虛擬物體會放大或加粗，以提示對眼球輸入的反饋，此外注視點也可以用光標、點、圓球等來表示。為了展示眼球和觸控交互，蘋果設計了一個與房間中的虛擬物體互動的方案。你可以注視某樣虛擬物體進行選擇（比如一疊照片），然后通過移動注視點來移動它。
