當地時間10月24日-26日,2023驍龍峰會在夏威夷隆重舉辦。在首日峰會上,高通全新旗艦產品驍龍8 Gen 3正式發布,成為現場的主角。值得一提的是,為能夠在手機芯片本地運行AI大模型,驍龍8 Gen 3大幅提高了芯片的AI能力,攜手合作伙伴開啟了手機生成式AI的新時代。
慧鯉作為高通在人工智能領域重要的合作伙伴現身峰會,在首日的主會場 Keynote環節和次日的移動專場(Mobile Spotlight)中,分別通過現場DEMO展示了生成式AI領域的視野拓展、人像超分功能,以及視覺3D重建能力等最新技術成果。依托驍龍8 Gen 3的能力,將領先的大模型和生成式AI賦能到手機端,為手機用戶提供影像拍攝等高質量極致體驗。
把大模型塞進手機,重新定義移動智能時代
隨著生成式AI技術和應用的發展,實現移動端的AI技術支持,尤其是AI大模型在手機端的落地,顯得愈發關鍵。對手機芯片來說,能夠在本地高速運行人工智能大模型,也成為了核心訴求。高通此次全新發布的驍龍8 Gen 3也將AI能力作為重中之重。
在首日的主會場 Keynote環節上,高通公司全球副總裁侯明娟介紹了 8 Gen 3的眾多強悍性能,并現場對慧鯉的人工智能Demo進行演示,呈現高通最新一代手機芯片與生成式AI結合的真實效果。
高通與慧鯉深度合作
在此次與高通的深度合作中,慧鯉通過將AI技術與芯片能力進一步深度融合,實現了生成式AI在手機本地完全運行,并在手機端完成高質量的生成和交互。這不僅讓AI交互無需再聯網上傳到云端,也讓隱私數據泄露的風險明顯降低。更關鍵的是,這也大大降低了自然語言交互和相關應用的門檻。
顯而易見,在共同推進技術進步的路上,慧鯉與高通正在重新定義當下的移動智能時代。
生成式AI賦能視野擴展、人像超分黑科技
生成式AI在移動端的深度應用展示,是此次驍龍峰會的最大亮點。慧鯉也是峰會首日唯一進行現場展示的生成式AI技術企業。全新驍龍8 Gen 3的支持,讓手機在智能影像層面實現了“視野擴展”與“人像超分”兩大重磅升級。
視野拓展DEMO
其中,視野擴展核心邏輯是通過慧鯉生成式AI技術,在手機端拍攝過程中完成邊緣視野的自動拓展。現場展示中,手機端可在數秒內迅速給出大模型生成結果。基于強大的生成式AI,過程中可以進行邊界畫質的自動優化,擺脫了生成區域畫質大幅退化的問題,不僅確保生成內容與原圖的合理性和一致性,也讓畫面更自然協調。
慧鯉視野拓展
人像超分則是針對手機人像拍照的又一項黑科技。基于此功能,在畫面拍攝定格后,生成式AI可以在手機端進行人像清晰度的增強和去模糊,并實時呈現畫面效果。這項功能可廣泛適用于各種復雜拍攝場景,比如成片后分辨率較低、畫質壓縮受損、畫面失焦、運動模糊等,讓每一張人像都可實現清晰度還原。
RGBD快、穩、省,釋放三維影像力
除了生成式AI領域,慧鯉還與高通在感知視覺領域祭出大招,展示了最新的RGBD深度圖補全算法,實現快速、穩定、省電,釋放三維視覺的強悍影像力,進一步解鎖移動端智能3D建模成像的高級玩法。
通過現場的DEMO展示,全新的RGBD深度圖補全可以在16毫秒內完成快速推理,并將生成誤差控制在0.1%,同時也實現了更低功耗。
與此同時,RGBD通過深度融合RGB和Spot depth信息,可生成更精確的稠密深度圖,賦予手機ToF攝像頭更遠的距離、更低的功耗、更高的信噪比和更全的深度信息。
這也讓驍龍8 Gen 3在ToF拍攝方面具備了三大優勢。一是“高保真”,生成式AI大模型讓RGBD拍攝更接近真實,可以保持原有硬件sensor的精度;二是“容錯強”,拍攝過程中容許少量的對齊誤差、離群點和信號噪聲;三是“實時性”,利用AI引擎實時低功耗處理,可支持60fps的幀數傳輸速度,讓拍攝所見即所得。
在移動端AI應用浪潮下,慧鯉和高通以智能影像為突破口,讓生成式AI在手機端完美落地。同時,配合感知技術的更新迭代,不但展示了AI的智慧魅力,也深度挖掘出了高通新一代先進芯片的性能潛力。面對人工智能領域的應用需求,慧鯉還將繼續與高通等廠商攜手,加速創新與突破,讓生活更便利更安心。
