近日,美圖公司旗下AI數字人生成工具DreamAvatar上線,首期推出“AI演員”數字人服務,以AI驅動為核心,服務于視頻內容創作、影視處理與剪輯等生產力場景。
雖然DreamAvatar的“AI演員”功能是美圖在影視行業的初次嘗試,但是在影視行業,數字人的應用已經相當普遍,且都是剛需。數字人主要用于代替或者輔助真人演員,實現變臉、變形等一些難以或者無法用真人完成的效果。比如在電影《復仇者聯盟4:終局之戰》中,鋼鐵俠的數字人替代了真人演員在太空中的戲份。
當下,數字人的生成分為CG和AI兩條技術路線,但CG技術生成的數字人比AI技術生成的數字人成本更高。根據公開資料顯示,傳統的CG影視做特效人物,不僅需要專業的設備投入,還需要花費大量的時間和預算。如一個普通的機器人、怪獸特效,往往需要幾周甚至幾個月的時間,花費高達幾萬到幾十萬美元不等的費用。而AI技術利用深度學習和神經網絡,無需人工參與和干預,可以自動化生成高質量和多樣化的數字人,從而節省了人力和時間成本。
DreamAvatar“AI演員”數字人的生成,不需要專業設備,一臺手機就能輕松搞定。用戶只需要將拍攝好的視頻素材導入,并指定視頻里的人物,剩下的一切都交給AI來操作。AI會進行人體檢測、跟蹤、擦除、替換,以及背景修復,自動把真人替換成數字人。利用3D人體姿態估計和驅動算法,DreamAvatar的AI演員能夠做到動作與真人完美同步;AI還會并行通過相機姿態估計和跟蹤,以及光照估計算法,讓數字人和環境自然融合,更具真實感。最后,將前面這一系列AI的處理,匯總到3D渲染并輸出,AI演員的特效大片就誕生了。
目前,DreamAvatar“AI演員”支持最長10秒視頻的轉化,共推出了機器人、獸人、類人三大題材共計11個不同風格的數字人形象,每個題材從造型風格、渲染風格都做了不同方向的細化,以給到用戶多樣性的體驗和選擇。
DreamAvatar“AI演員”的功能極大提高視頻創作的效率,將原本以天為單位的制作周期,縮減到小時,同時省去了專業設備成本和建模渲染等人力成本,提高生產運營效率的同時,做到降本增效。不止是專業用戶,大眾用戶也能借助DreamAvatar的“AI 演員”功能輕松創作數字人的視頻大片。
此外,DreamAvatar的另一場景“AI主播”功能已先行落地在美圖矩陣開拍App,為視頻口播創作者提供更多元的內容表達方式。除了視頻創作者,不同的品牌客戶,也可以通過接入API和SDK接口的方式,打造品牌專屬的數字人。
未來,DreamAvatar會繼續探索數字人+AIGC的落地場景,拓展使用場景,服務更多的行業。