中國經濟周刊-經濟網訊 （記者 孫冰） 應輝，一名AI動捕研究師，也可以介紹為一個可以"讓二次元小姐姐跳舞更美的三次元小哥哥"。
作為"元宇宙打工人"，應輝的工作其實就是通過AI技術把你在現實世界中的動作捕捉提取出來，然后在虛擬世界中進行還原，這樣就可以讓在虛擬世界中的你也能動起來。
為了做好這份工作，應輝和幾位同事雖然都是理工技術男，但大家都關注了很多B站舞蹈區UP主，還會看很多二次元視頻。而且由于測試需要，他們還常常需要親自表演一些舞蹈動作，以更好地"調教"動捕軟件。
應輝在工作中
"那畫面，只能說是相當‘辣眼睛’。"應輝半開玩笑地說。當記者提出"無圖無真相"的要求時，應輝發來了同事的表演動圖。
男生同事"辣眼"演繹二次元小姐姐
男生同事"辣眼"演繹二次元小姐姐
從傳統動捕到AI動捕，從"奢侈品"到人人可及
應輝本科和碩士都就讀于東南大學微電子專業，他是在暑期實習中第一次接觸到了AI動捕這個領域。
"雖然當時做的只是做了一個非常簡陋的Demo，通過手機拍攝來重現人體三維模型，然后生成一個自己的專屬虛擬形象。但我感覺這個應用未來會有很多落地場景，會非常有發展前景。"應輝告訴《中國經濟周刊》記者。于是，應輝在畢業后就選擇加入網易互娛AI Lab，成為了一名AI動捕研究師。
動捕，即動作捕捉，其實并不是一個新領域，早在二十年多前開啟的《指環王》三部曲中，咕嚕（Gollum）就是由演員安迪·瑟金斯提供的動作捕捉和配音，驚艷了全球觀眾，很多粉絲都認為奧斯卡欠他一座"小金人"。而在《阿凡達》中，詹姆斯·卡梅隆導演更是讓動作捕捉與表情捕捉技術在影視領域的應用再創新高度。
之后，在影視、游戲等多個產業中，動捕的應用越來越廣泛。但毫無疑問，傳統動捕是一種"奢侈品"。
動捕成果生成過程
據應輝介紹，傳統動捕流程一般采用的是光學或慣性動捕，需要專業動捕演員穿戴專業動捕服裝或在身上添加標記點，在專業動捕攝影棚中，通過一圈的專業紅外相機來捕獲動作數據。而且一個動作或許要重復多次、反復捕捉才能達到好的提取效果。因此，傳統動捕的制作周期漫長，成本也極高。
"雖然目前國內外都有較為成熟的傳統動捕解決方案，但一套動捕設備的硬件成本就要幾十萬到幾百萬元，制作的內容的成本通常要以每分鐘萬元級別來計算。"應輝說。
正如AI正在改變和賦能千行百業一樣，人工智能技術也給動捕行業帶來巨大改變，極大地實現了降本增效。應輝透露，現在的AI動捕不依賴專業設備和特定采集環境，只要一臺手機就能完成，這就讓AI動捕變得越來越人人可及。
"比如我們研發的AIxPose視頻動捕工具就是一種更輕量級、高效率、低成本的動捕方式。普通人只需要用普通手機攝像頭拍攝視頻，這個軟件就可在短短幾分鐘內自動提取人體的動作數據，再應用于游戲、動畫、廣告、教學等各類長短視頻的制作流程中。相比美術人員‘手K’（指美術人員一幀一幀手繪動畫，一分鐘動畫視頻大概需要1000多幀），這種方式能節省80%左右的制作時間和成本。"應輝說。
應輝還表示，現在國外也有很多科技公司在做這方面的研究和探索。"應該說，我們至少與世界先進水平是同步的。"他說。
但應輝認為，AI動捕和傳統動捕并不是替代關系，AI動捕的應用場景和傳統動捕其實有很大差別，更多是為用戶提供一個新的選擇。
以對動捕需求很大的短視頻創作領域為例，"短視頻需求以短平快為主，因為熱點來得快走得也快，如果用傳統動捕方式來制作，拋開成本不談，等一個月后做出來，熱點早就涼了。"應輝說。
除了降本增效，AI動捕由于是直接從視頻中提取動作，而不是通過動捕演員的表演來呈現，所以素材可以更加廣泛和易得。
"比如前一陣子《狂飆》很火，很多短視頻都在模仿高啟強那種很拽的走路步伐，這個動捕演員就很難模仿出張頌文老師的表演精髓。但AI動捕就可以直接使用原視頻，讓虛擬人物直接‘復刻’張老師的經典動作。"應輝說。
一部手機，就能讓你在元宇宙里動起來
隨著元宇宙、虛擬人、數字人、AR/AR的興起，UGC創作對動捕需求正變得越來越大，應用場景也越來越豐富。"元宇宙的核心就是為現實世界建立一個在虛擬世界中的映像，而動捕技術可以讓元宇宙中的你動起來，而且是盡可能以百分百還原的方式動起來。"應輝說。
一部手機就能實現動捕
但是，AI動捕技術的實現并不容易。應輝透露，自己的同學大部分是在半導體、計算機、互聯網等行業里工作，自己的工作因為離用戶更近，所以會更有趣一些。但這意味著，他除了要專注技術，還需要掌握很多其他領域的知識力和理解力。
"我們一開始沒有想到動捕對動作細節會有那么多、那么高的要求。我們覺得動作提取得已經很好了，因為乍一看確實是差不多的，但專業人士一看，就會發現區別很大。比如，美術的同事會指出，虛擬形象在跳舞的時候腳步有滑動，或者跑步時候身體重心不對，不像一個正常人，而是像一個機器人，這些就都需要我們反復進行技術上的調整和優化。"應輝說。
為了能更好地領悟到舞蹈表現力的精髓，應輝會大量觀看舞蹈視頻和惡補二次元，還會親身體驗。"你看到的二次元小姐姐跳舞視頻，很有可能動作是提取自一個三次元小哥哥。"他說。
但是，當應輝和同事們幫助客戶把從一段過去二十多天才能完成的營銷動畫視頻縮短到三天就完成了，他們還是充滿了成就感的。"過去要制作一段跳舞動畫，可以能需要美術人員一幀幀地手繪出來，但現在可以先做動捕，然后美術人員只需要在動捕視頻的基礎上進行修改就可以，這大大提高了美術的生產力。"應輝說，更讓他們感受到工作意義和價值的是，他們把動捕體驗帶給了越來越多的普通人，讓每個人只要通過一部手機，就有機會創作出自己的元宇宙作品。
一審：鄭揚波 二審：王新景 三審：周琦
