一個普普通通的平面,遇上 AR 后會產生什么不一樣的交互體驗?
2021年被稱作為元宇宙元年,伴隨5G、XR等技術快速發展落地,AR 作為連接元宇宙和現實世界的技術紐帶之一,也在加深與各行各業的融合,并為用戶在虛擬世界中帶來更有趣、更具互動性的沉浸式體驗。
比如,學生可以借助一盞AR臺燈,在書桌、墻壁甚至任何一個平面上,就可以獲得更具社交性、更真實的學習體驗。不需手機或者其他設備,只要動動手指,師生之間就能做到遠程實時交流:教師的批改不再顯示在電子屏幕上,而是通過AI算法“寫”在學生的作業本上,實現紙電交互,不僅減少了電子設備對學生眼睛的傷害,也讓線上學習變得更加有趣。
這盞能讓平面變成學習課堂的臺燈,正是出自于聲網的超音速永久創業伙伴、國內投影人機交互技術與設備研發商—深光科技,在其 AR 解決方案中,師生互動過程中的高穩定性實時音視頻則是由實時互動云服務商—聲網提供,使用者無需任何穿戴設備,僅通過手勢、觸摸等操作行為就可實現在現實空間中的裸眼交互應用。
AR+AI,深光用技術刷新學習交互體驗
AR一定是未來主流的交互方式,深光科技 CTO 郭嘉偉表示。人機交互的最終目的,無非是希望使信息溝通效率達到最大、操作方式最簡潔、用戶體驗最舒適。AR無疑是各類交互方式中極具競爭力的一種,而與教育硬件的結合,更能從多方面去提升學生在線學習的效率和體驗。
線上教學雖然打破了空間約束,但距離感仍然存在,視頻授課無法滿足學生對沉浸式學習的需求。如何在已經跨越地理、人數限制的情況下,讓線上教學的交互體驗更加逼近線下教學的效果,是未來在線教育行業發展的核心方向。
基于此方向的探索,深光科技在2020年切入教育賽道,推出深光 AR 投影伴學臺燈,針對家庭伴學、在線教學等場景,將投影技術、AR技術、AI識別技術與護眼臺燈相結合。AR臺燈可以在任意平面上投射出23寸護眼大屏,在學生學習過程中,對書本內容進行識別,并結合AI算法實時呈現多樣化電子教育內容。
學生與教師遠程交互時,基于聲網的實時音視頻、互動白板等技術和產品支撐,教師在網頁端既看得到學生狀態和桌面作業,也可以對畫面中的作業進行實時批改,筆跡同步呈現在作業紙與桌面上,如同教師坐在學生身邊親身授課,打破距離感,讓學生仿佛置身課堂,“雖遠隔千里,猶如在身邊”。
但想要真正做到讓線上教育接近線下教育的效率和體驗,除了還原實時課堂的書寫模式,還需要展現實時上課講解。因此,這個過程中,高穩定、低延時的實時音視頻也是核心關鍵。“與聲網合作,成功解決了以往AR臺燈在音視頻通話過程中的穩定性問題,并且聲網的‘空間音頻’技術更是助力提供了更具臨場感、沉浸式的教學體驗。”深光科技 CEO 馮翀表示。
在交互方案上,深光科技是基于AI+AR算法開發,結合多模信號,在嵌入式算力條件下實現毫米級的精度、70幀的觸控幀率,有效排除誤觸和干擾,實現三類交互支持:投影與人類觸控的交互、投影與實際物體的交互和遠程通信的端到端交互。
技術加持+資源協同,聲網生態多維賦能深光
作為一家初創公司,在成立不到2年的時間里,深光科技推出的AR智能燈訂單額已突破了千萬元,并獲得來自峰瑞資本、北航投資、啟迪之星等千萬級融資。“這樣快速的發展,離不開生態合作伙伴‘聲網’的支持。”馮翀坦言。
在今年年初,深光科技參與了聲網生態的“超音速計劃”和“聲選計劃”,在 AR 臺燈產品的打磨優化過程中,聲網除了提供「超音速大禮包」的免費百萬音視頻通話分鐘等多種技術和產品賦能外,更是通過自己的生態技術合作兼渠道合作伙伴科大訊飛在智能語音、交互解決方案上提供了技術加持:
1)聯合科大訊飛的語音智能技術,為 AR 臺燈增加了語音喚醒、語音加持、語義理解、音庫訂制等個性化功能;
2)科大訊飛 AIUI 人機交互平臺能力持續注入技術保障 ,包括 CAE 降噪算法、AIU 服務授權在內的語音整體交互解決方案,協助深光科技提升自有產品解決方案綜合競爭力;
3)協助深光科技整合研發資源,提升團隊效率,全面保障上線時間與縮短迭代周期;
不僅如此,對于創業初期的企業來講,如何尋找可持續的銷售渠道、完備的銷售運營、以及成本支出方面都是痛點和難點,聲網在這方面對深光科技給予了多渠道資源協助:
1)銷售渠道上,聲網生態助力打通并嘗試鏈接科大訊飛分發渠道,為深光科技提供產品分發;
2)推動深光科技接入科大訊飛 AIUI 人機交互平臺,預估綜合實現成本節約達12%;
3)為深光提供免費實時音視頻額度,降低語音能力前期集成成本,在科大訊飛側申請相應技術支持額度,同時結合市場體量優化價格結構,最終實打實的降低初創企業前期成本;
虛實結合的人機交互技術在教育領域的應用剛剛起步,馮翀判斷,教育硬件的市場將會迎來一個長時間的爆發期。深光科技也將繼續探索更多教育場景下,虛實結合人機交互技術的應用。這個探索的過程中,作為合作伙伴,聲網生態將繼續整合多渠道多品牌資源去賦能和扶持。