隨著科技的不斷發展，人們對于機器人技術的需求也逐漸增加。機器人技術的應用場景越來越廣泛，其中，機械臂控制系統在很多領域都是一個非常重要的應用領域。腦機接口（BMI）也已被廣泛用于控制機械臂。然而，對于BMI用戶來說，使用機械臂控制物體的過程仍然是一項復雜的任務。即使經過廣泛的訓練，也很難達到高效率和準確性。一個重要的原因是用戶缺乏足夠的反饋信息來執行閉環控制。
據報道，微美全息提出了一種增強現實（AR）引導的輔助方法，使用混合BMI為用戶提供增強的視覺反饋，用于閉環控制，該混合BMI結合了腦電圖信號和眼睛跟蹤，以直觀有效地控制機械臂。
公開資料顯示，微美全息開發的基于增強現實控制的閉環混合信號腦機接口機械臂控制方法，通過結合基于腦電圖（EEG）信號的BMI和眼動追蹤技術，為用戶提供增強的視覺反饋，在控制機械臂過程中實現閉環控制。該系統集成了BMI、眼睛跟蹤、圖像處理、自動控制和AR接口的功能，允許用戶執行對象操作任務。圖像處理用于從工作空間的圖像中分割所有潛在的矩形對象。用戶可以使用眼睛跟蹤來選擇分割的對象。從BMI解碼的輸出用于（1）確認用戶選擇的對象，（2）切換動作順序，或（3）在抓取和提升過程中連續控制夾具的孔徑和高度。用戶選擇的物體以及抓取和提升操作的狀態通過計算機屏幕使用AR技術實時反饋給用戶。最后，機械臂根據混合BMI解碼的輸出執行拉伸、抓取、提升、遞送和釋放任務。系統裝置設備包括眼動儀、腦電圖耳機、電腦、機械臂和USB攝像頭。使用混合凝視BMI和AR增強的視覺反饋來執行用戶和系統之間的交互。
WIMI微美全息研發的基于增強現實控制的閉環混合信號腦機接口機械臂控制系統包括：
增強現實控制界面：通過AR技術，設計出一個直觀、易用的控制界面，用戶可以通過手勢或語音等方式控制機械臂的運動。
采集腦電信號：使用腦電圖設備采集用戶大腦的電信號，將其傳輸到計算機。
處理腦電信號：使用信號處理算法，對腦電信號進行濾波、特征提取等操作，提取出用戶想要控制的機械臂運動的指令。
生成控制信號：根據用戶的腦電信號，生成控制信號，控制機械臂的運動。
機械臂控制：機械臂的控制系統，包括電機驅動器、位置傳感器、控制芯片等硬件設備的選擇和搭建。
實現閉環控制：將采集到的機械臂位置反饋信息傳輸回計算機，實現閉環控制，確保機械臂的運動精確、穩定。
實時控制：將用戶的控制信號和機械臂位置反饋信息實時傳輸到機械臂控制系統中，實現實時控制。
同時，WIMI微美全息對所開發的閉環系統（具有AR反饋）與目前傳統的開環系統（僅具有視覺檢查）進行了測試。結果表明，與僅使用正常視覺檢查的試驗相比，AR反饋顯著降低了抓取和提升物體的觸發命令。此外，夾具在提升過程中的高度間隙也減小了。混合BMI用戶受益于AR界面提供的信息，這提高了效率，并減少了抓舉過程中的認知負荷。AR反饋的閉環系統為用戶使用混合BMI控制機械臂提供了一種新穎有效的方法，通過集成更先進的圖像處理和機器學習算法來進一步改進傳統控制系統，以增強工作空間中對象的分割和BMI信號的解碼。
科技在不斷進步和發展，機器人技術的應用場景越來越廣泛。機械臂控制系統作為機器人技術的一個重要應用領域，市場前景非常廣闊。特別是在生產制造行業中，機械臂控制系統已經成為了必不可少的工具。WIMI微美全息基于增強現實控制的閉環混合信號腦機接口機械臂控制系統，采用了增強現實技術和腦機接口技術，可以提高操作的準確性和速度，同時還保證了操作的安全性，擁有非常廣泛的市場前景。WIMI微美全息也將進一步完善與改進該系統，使其適用與現實的市場需求，用于目前的工業生產環境。
