在剛結束的計算機視覺頂級學術會議 CVPR 2021 上,涌現了多種優秀的計算機視覺 AI 算法解決方案。
其中最佳論文獎為 GIRAFFE: Representing Scenes as Compositional Generative Neural Feature Fields。該論文關注當下流行的深度神經網絡的圖像合成議題,論文作者提出一個假設:在圖像合成模型中,假如引入三維環境,那么生成的過程將變得更可控,圖像的合成效果將更好,基本原理是在深度學習模型中加入新生成的神經特征場,來幫助模型更好地理解場景的形成。
不難發現,如今計算機視覺等技術成為學界的熱點,吸引了全球 AI 高手的關注,中國也不例外。在本次參與 CVPR 2021 的 21036 名作者中,來自中國的選手約占四成,達 8203 人,遠超英、美、韓等國家,并在論文數、冠軍數上均有不俗的表現。
作為國內長視頻網站頭部企業,芒果TV也參與了CVPR2021,并在視頻人體時空定位賽事中,與國內外高校、研究所等多支計算機視覺頂級研究團隊共同競技,最終一舉拿下亞軍!
如今芒果TV 依托行業領先的技術硬實力和品牌影響力, 欲匯聚業內頂尖技術人才,深度聚焦人工智能的技術創新與行業應用,共探產業未來,與中國(長沙)馬欄山視頻文創產業園聯合舉辦第二屆“馬欄山杯”國際音視頻算法大賽。該賽踐行“技術驅動產業智能化”的宗旨,真正關注技術與實際場景的應用與實踐,致力解決企業實際的技術與業務的難題,推動產業升級。
01 專業賽題來自千億企業的思考,聚焦行業真實場景
繼往開來,面向音視頻領域的未來,行業探索的前沿方向有哪些?作為市值千億的企業,芒果超媒旗下核心平臺芒果TV一直以來用實踐引領產業升級。在本次大賽中,根據多年真實的業務場景,錘煉了三大專業音視頻技術賽題:
第一個賽題是視頻補全,要求參賽者利用 AI 算法對視頻的內容進行分析和操作,對缺失區域做相關的補全。
為何視頻補全技術如此受重視?我們先看個例子:6 月 30 日,人民日報發布的#AI 修復讓李大釗陳延年們露出微笑#沖上熱搜第一,當看到 AI 技術讓李大釗、陳延年等革命先驅露出微笑時,令人感動不已。無獨有偶,回首 2020 年頻頻上熱搜的#AI 修復老北京影像#,同樣讓人為 AI 修復技術點贊。
除了對老照片、老視頻的修復外,在視頻后期場景中,如何智能、高效地將不和諧因素、穿幫鏡頭、廣告等抹除掉,也是每個視頻平臺亟待解決的需求。因此大賽希望借此視頻補全賽題,推動相關技術進步,促進行業發展,給觀眾呈現蘊含高科技元素的視聽盛宴。
第二個賽題是視頻推薦。隨著移動互聯網時代的信息井噴,為了匹配海量內容和用戶的需求,吸引用戶點擊,視頻推薦技術功不可沒。否則,無論用戶如何搜索,也將看到同樣的首頁內容。而視頻推薦則可根據用戶的行為習慣,提供個性化服務,讓不同的用戶看到不同的首頁,提升用戶體驗,促進轉化率。
本大賽以芒果 TV點播信息流模塊的實際推薦業務場景為原型,提供海量用戶的真實點擊行為數據,希望視頻推薦賽題的參與者設計出一套精準有效的推薦模型,生成多元化的推薦展示結果。
第三個賽題是音樂節拍檢測。節奏和節拍就像音樂的骨骼和脈搏,我們可通過算法自動將音樂節拍等要素檢測出來再衍生應用,如此一來,可極大地豐富音樂的沉浸感和可玩性。目前音樂節拍檢測技術在音樂風格遷移、K歌評分、音樂自動配視頻、游戲等領域發揮重要作用。
本賽題提供1100條音樂片段和相對應的節拍、重拍的時間點標注數據集,鼓勵參賽者使用動態規劃、深度學習等方法,提取音頻中的點位,并結合計算機音樂學,一起趣味玩轉節拍檢測。
綜上可見,本大賽作為行業高規格的國際賽事,結合音視頻領域的主流技術與應用,提供海量真實數據集,深剖行業痛點,引領全球開發者緊跟技術浪潮。
02 UCD、清北復交全球名校同臺競爭,阿里、騰訊大廠爭相參與
2020 年,首屆“馬欄山杯”國際音視頻算法大賽吸引來自中國、美國、日本、英國、德國、印度、新西蘭等十幾個國家和地區的知名高校、業界大廠等上千支隊伍的參與,各界音視頻 AI 高手一起交流學習。其規模之大,影響范圍之廣,在 2020 年的音視頻算法賽事上形成標桿效應。
今年“馬欄山杯”國際音視頻算法大賽重磅回歸, 正式賽一經啟動,便吸引到國內阿里、騰訊、小米、京東、華為等 100 多家知名企業隊伍參賽,更有紐約大學、加利福尼亞大學戴維斯分校(UCD)、清華大學、北京大學、復旦大學、上海交通大學等 100 多所全球高校踴躍參與。賽事正如火如荼展開,AI 高手們同臺 PK各展所長,不斷突破技術瓶頸,如視頻補全賽道上,當前暫列第一名的參賽隊伍比baseline指標還高13%。
現在精彩仍在繼續!第二屆“馬欄山杯”國際音視頻算法大賽跨越學術研究與技術生產,深耕音視頻技術與產業應用,正火熱進行中!
03 豐厚獎勵,只為最懂 AI算法的你!
本次大賽不僅融合前沿 AI 技術,聚焦企業真實應用場景,為廣大開發者提供展示創意和想法的舞臺。更誠意十足準備了心動獎金和豐厚獎勵,鼓勵更多 AI 開發者加入實戰!
冠軍團隊有機會獲取高達 33 萬獎金大獎,優勝者還有可能獲得大廠 Offer!大賽現已火熱報名中,高手虛位以待。
獎項設置情況如下:
正式賽的賽程安排情況如下:
本次大賽的使命是成就 AI 開發者,無論你是 AI 學習者、AI工程師、研究者、還是數據科學等其他領域工程師,通過本次大賽均有機會與高手交流學習音視頻技術,共同進步。
還等什么?趕緊登陸大賽官網,加入大賽,向冠軍出發!
