快手公司在人工智能領(lǐng)域邁出了重要一步,推出了其自研的大模型——“快意大模型”,并深入探索了其在短視頻場(chǎng)景中的多樣化應(yīng)用。自2023年初啟動(dòng)研發(fā)以來,快意大模型憑借廣泛的應(yīng)用場(chǎng)景、豐富的多模態(tài)數(shù)據(jù)資源以及強(qiáng)大的算力基礎(chǔ)設(shè)施,迅速取得了顯著進(jìn)展。
在技術(shù)層面,快意大模型已發(fā)布了多個(gè)版本,其中2023年8月和9月推出的13B和66B版本在權(quán)威榜單上表現(xiàn)突出。2024年2月發(fā)布的175B版本,在內(nèi)部評(píng)測(cè)中更是超越了GPT-3.5的水平,接近GPT-4的性能。快意多模態(tài)理解大模型的kwaii-vlm-8B-dev版本也在業(yè)務(wù)應(yīng)用中展現(xiàn)出了良好的可用性。
為了提升模型性能,快手采用了多項(xiàng)關(guān)鍵技術(shù),包括預(yù)訓(xùn)練、對(duì)齊、推理等階段的優(yōu)化策略,如Temporal Scaling Law、MiLe Loss等。同時(shí),還引入了SFT訓(xùn)練數(shù)據(jù)采樣、答案質(zhì)量提升等策略,以及詞匯單元并行解碼技術(shù),使得模型在對(duì)話生成、內(nèi)容理解等方面表現(xiàn)出色。
快意大模型在內(nèi)部評(píng)測(cè)中取得優(yōu)異成績(jī)
快意大模型的應(yīng)用場(chǎng)景廣泛,不僅作為情感陪伴機(jī)器人“AI小快”在短視頻平臺(tái)上為用戶提供有趣、有溫度的長(zhǎng)多輪互動(dòng)體驗(yàn),還應(yīng)用于對(duì)話式搜索、商業(yè)化短視頻文案創(chuàng)作、營(yíng)銷智能Bot等多個(gè)領(lǐng)域。這些應(yīng)用不僅提升了用戶體驗(yàn),也為快手的商業(yè)化進(jìn)程注入了新的動(dòng)力。
“AI小快”在短視頻平臺(tái)上的應(yīng)用
快意大模型在B端和C端用戶理解方面也展現(xiàn)出了強(qiáng)大的能力,為數(shù)字人智能體的開發(fā)提供了有力支持。這一突破性的進(jìn)展,標(biāo)志著快手在人工智能領(lǐng)域的技術(shù)實(shí)力和應(yīng)用能力達(dá)到了新的高度。
快意大模型在B端和C端用戶理解方面的應(yīng)用
在快手的持續(xù)努力下,快意大模型將繼續(xù)提升其能力,深度融合AIGC技術(shù),進(jìn)一步拓展應(yīng)用場(chǎng)景,并建立更加完善的智能體生態(tài)。這將為快手在未來的市場(chǎng)競(jìng)爭(zhēng)中提供強(qiáng)有力的技術(shù)支撐。
快意大模型的技術(shù)架構(gòu)和應(yīng)用場(chǎng)景
快意大模型的技術(shù)優(yōu)化策略