12月22日,騰訊QQ正式發(fā)布“我的心靈之旅”2022年度報告(以下簡稱“報告”)?;仡欉@一年的使用狀況,你最愛用的表情包是什么?好奇你今年和誰聊得最火熱?QQ 空間第一張照片留給了誰?登錄QQ,首頁搜索“年度報告”,點擊即可進入回憶。本次報告還有一大亮點,即在報告結(jié)尾的專屬音樂彩蛋,是由DeepMusic提供獨家技術(shù)支持的AI合成音樂。
以AI技術(shù)打造用戶個性化音樂形象
如今,人工智能(AI)正在越來越多地應(yīng)用于音樂、電影和繪畫等藝術(shù)領(lǐng)域。QQ2022年度報告音樂彩蛋的亮點在于,DeepMusic通過機器學習算法、基于樂理規(guī)則的生成模型等AI音樂生成技術(shù),結(jié)合QQ用戶的活躍屬性、愛好、使用行為等不同的社交特質(zhì)匹配生成個性化音樂,并加入QQ特有的音效,依托AI能力滿足QQ用戶千人千面的音樂形象打造,既有品牌屬性又符合用戶社交調(diào)性。在這個過程中,就像人類的學習一樣,AI也能夠通過海量的語料庫內(nèi)容學習“創(chuàng)作”出全新的作品。
作為國內(nèi)市場上唯一利用深度學習方法進行人工智能作曲的專業(yè)團隊,北京靈動音科技有限公司(DeepMusic)成立于2018年2月,創(chuàng)始團隊來自清華大學,核心技術(shù)來自清華大學計算機系智能技術(shù)與系統(tǒng)國家重點實驗室,目前已有5年技術(shù)積累。
據(jù)了解,DeepMusic充分聚焦于聽覺層面的感知智能,通過多年的數(shù)據(jù)及算法積累,從作詞、作曲、編曲、混音、歌聲合成全鏈條全方位降低音樂創(chuàng)作及制作門檻,幫助廣大的音樂愛好者以低成本高效率地學習音樂知識,享受音樂實踐,參與音樂娛樂,進而能創(chuàng)作出屬于自己的作品。例如,通過軟件創(chuàng)作出不同作曲家風格的作品,或者使用機器學習算法生成全新的歌曲和聲音。
多場景AI音樂能力賦能 夯實核心技術(shù)競爭力
五年來,DeepMusic的音樂制作團隊一方面在不斷積累豐富的高質(zhì)量音樂內(nèi)容,另一方面在嘗試各種音樂制作新方法,為AI音樂制作等技術(shù)研究提供專業(yè)支持。同時,DeepMusic的音樂標注團隊一直專注在存量歌曲的音樂信息標注工作上,包括速度、節(jié)拍、段落、和弦、旋律、歌詞等,為音樂信息檢索(MIR)技術(shù)研究提供數(shù)據(jù)支持。
截止目前,DeepMusic通過自研的AI音樂生成系統(tǒng)(AI音樂制作人)“伶?zhèn)?rdquo;,能夠生成8種以上不同風格的上萬條高質(zhì)量音樂伴奏,并制作了數(shù)十首睡眠純音樂發(fā)布在QQ音樂,累計獲得超800萬次的收聽量。同時,“伶?zhèn)?rdquo;還可支持高精度導(dǎo)唱歌詞的生成及旋律打分功能,有效支持了全民K歌“一歌多伴”的創(chuàng)新性音樂娛樂玩法,并取得了用戶的一致好評。DeepMusic相信:Everyone can be a musician!基于音樂知識的云化,以及音樂創(chuàng)作的AI算法,讓每個人都能夠用音樂表達自己。
不僅如此,DeepMusic還通過自研的AI音樂信息采集系統(tǒng)“愚公”,并配合少量的人工支持,完成了上萬首歌曲的音樂信息標注模板,有效支持了全民K歌的智能修音、QQ音樂的智能曲譜等音樂功能。
這種對于全鏈條AI音樂引擎的實踐與探索,不僅能夠為業(yè)余音樂愛好者提供全新的創(chuàng)作方式,而且也能夠成為音樂行業(yè)的創(chuàng)意輔助工具提供新的產(chǎn)品體驗和解決方案,并提升創(chuàng)作效率。
隨著DeepMusic對AI技術(shù)的不斷優(yōu)化升級,未來將致力于沉浸式音樂交互體驗打造,通過人工智能輔助音樂創(chuàng)作和制作,降低音樂交互所需的知識門檻和操作門檻,將視覺形象逐漸融入音樂交互體驗,努力為用戶打造多維感官的沉浸式音樂交互體驗,將技術(shù)全方位賦能音樂愛好者的學習與創(chuàng)作之中。