8月10日,2023快手光合創作者大會在上海召開。大會以“熱愛,讓收獲更多”為主題,深入解讀快手創作者成長及內容生態走勢,重點闡釋平臺好內容背后的AI技術支持,幫助創作者更好地提升短視頻內容的創作力和生產力。
在大會“AI賦能,守護創作”板塊,快手生產&社交業務負責人肖新攀、快手AI&用戶增長業務負責人王仲遠分別發表了主題演講,從技術角度解析了如何借助AI生產短視頻好作品。快手在演講中還首次正式公開了大模型方面的進展并重點介紹了AIGC數字人解決方案。
AI技術加碼好作品生成,視頻創作也可以很簡單
對于一個好的短視頻作品來說,好內容和好形式缺一不可。那么如何用短視頻的方式將好內容呈現出來呢?這就需要借助對于分鏡和構圖、片段剪輯、轉場、背景音樂等形式設計來做出更好的視聽效果,而這也無疑對創作者提出了更高的要求。
一直以來,快手始終致力于讓所有人都可以用短視頻輕松地記錄、表達和社交,并為此打造好用的視頻創作工具,滿足廣大創作者的需求。伴隨著AIGC等新技術的出現,快手也在不斷優化技術產品功能、上新產品,為創作者們提供更便捷、高效的創作服務。
在肖新攀看來,AIGC能夠讓視頻創作變得更簡單。具體而言,對于專業創作者來說,AIGC能夠大幅降低視頻制作的成本,讓大家把更多時間放在打磨創意和內容上;對于有好想法,但在創作視頻上有所欠缺的普通用戶來說,通過AIGC也能夠輕松制作出效果精美的視頻,成為一名視頻創作者。
在降低創作者視頻制作成本方面,借助AI技術,快手不僅可以幫助創作者將繁瑣復雜的操作簡單化,還能通過AI生成海量圖片、視頻、貼紙、音色素材、文案等供創作者們使用。例如,當創作者在剪輯時需要用到“飛機劃過天空”的圖片素材,但相冊中沒有、當下又沒有條件拍這樣的素材時,就可以借助快影上的AI文生圖功能,實時生成所需素材。
據肖新攀介紹,在過去一段時間里,快手不僅在AI技術方面投入了大量的資源,還在快手App、快手官方剪輯工具快影,以及官方拍攝工具一甜相機上線了一系列創作功能、素材和效果玩法。“接下來,我們還計劃在快影和一甜相機上線AI四格漫畫、AI生成影視解說腳本、AI生成商品介紹腳本、AI一鍵Vlog剪輯等一系列AIGC能力,賦能更多的創作者。”
全模態大模型AIGC解決方案亮相,人機共創提升創造力和生產力
為了更好地服務廣大創作者,快手持續迭代更新AIGC技術能力,以幫助創作者解決創作過程中的各種痛點。王仲遠表示:“快手AIGC以創作者為核心,人機共創,全流程提升短視頻內容的創造力和生產力。”
目前,快手AI團隊致力于用AIGC能力去幫助廣大的快手創作者解決創作過程中的各種痛點,提升創造力和生產力。快手AI團隊打造的“全模態、大模型AIGC 解決方案”,基于強大的自研基座AI大模型,具備文本生成、圖像生成、3D素材生成、音頻音樂生成、視頻生成等全模態AIGC能力,覆蓋從靈感啟發到創意生成、從多元素材提供到智能化制作的創作全流程,通過人機協同,讓創意更新奇、素材更多元、制作更輕松。
在創意激發方面,快手基于自研語言大模型,強化了計算機系統對自然語言的理解和生成能力,能夠根據用戶一個指令,在一分鐘內完成故事撰寫、腳本整理,并基于場景主題生成對應圖片和配樂,從而節省創作者的時間和精力,同時提供更多視角的靈感和創意。快手的語言大模型在同等規模參數下,在行業里主流的絕大部分基準模型測試中取得第一(例如側重英文綜合能力的MMLU,側重中文綜合能力的C-eval、C-MMLU,側重代碼能力的Human-eval),在相關人工評測中也表現優異,擅長內容創作、邏輯推理、解數學題等任務。
據悉,快手基于自研語言大模型的「快手AI對話」已經于近日開啟內測。「快手AI對話」以搜索場景為入口,依托于快手豐富的內容生態訓練,用戶可以通過對話互動的形式,查找快手站內的短視頻、達人、百科等內容,是一種全新的搜索形態。「快手AI對話」在多元內容的呈現上,相比傳統的搜索將有更多可能性,有望在未來大大降低用戶的搜索使用門檻,讓新技術帶來的便利惠及更廣泛的人群。
在素材挖掘方面,快手自研文生圖大模型,基于強大的圖像生成能力,能夠幫助創作者生成對應主題的圖片素材,讓創意和想象力可以被更好地描繪。同時,該模型提供對圖片素材進行局部修改、全局魔改、圖像多方位拓展、多張圖像融合等圖像編輯能力,靈活高效地滿足創作者們對AI素材的“再創造”需求。
而針對創作者們對多元化音樂素材的需求,快手在歌詞和旋律兩方面提供強大的音樂生成能力。從歌詞的“形”、“意”、“蘊”入手,快手設計并實現了基于預訓練的可控歌詞生成系統,可以根據主題AI生成歌詞,再完成結構化旋律生成。
在剪輯和制作方面,快手AIGC視頻生成解決方案可以實現一鍵制作特效大片,生成的視頻幀間穩定不抖動,支持各種風格和時空轉場,還可以單圖輸入生成高品質表情姿態。
本次大會上快手還重點介紹了AIGC數字人解決方案——快手智播。快手智播支持用戶快速制作自己的孿生數字人,并使用其快速開直播、做短視頻,可在本地消費、本地生活、電商直播等場景落地,部分場景效果可以接近真人實拍。
快手智播使用也非常便捷,最低只需要3分鐘的視頻和音頻素材(5分鐘以上更佳),就可以制作相應的數字孿生形象,同時快手還將提供整套的SaaS服務工具,不需要用戶另外采購任何硬件設備,真正做到一鍵開播。這套流程在當前的技術能力下,僅需千元即可完成,而此前傳統數字人制作費用一般需10萬元以上。
王仲遠表示,身處這場 AI 技術變革之中,快手堅信AIGC將賦予普通用戶更多的創作權力和自由,也堅信AIGC正在成為短視頻內容生產的基礎設施。通過不斷升級技術能力、優化產品功能,快手將為創作者提供更便捷、更智能的創作體驗。