時下,由于ChatGPT等因素的影響,“大模型”也日益成為人工智能領域最熱門的關鍵詞之一。而為大模型提供訓練場景的AI裝置、智算中心等硬件,也隨之熱度飆升。
4月18日,火山引擎2023Force原動力大會在上海舉辦。火山引擎總裁譚待表示,企業上云用云只是過程,致力于更敏捷、更前沿的智能化創新,才能拿到敏捷迭代的“果實”。面向不同場景、不同行業,火山引擎為客戶提供全面的工具助力做好云上創新。
近期最重要的云上創新趨勢莫過于AICG、大模型推動的智能化浪潮。隨著多模態大模型的興起,ChatGPT 2個月獲取過億用戶,國內的NLP大模型以及多模態大模型創新公司也在奮力追趕。
譚待對此表示,大模型還在發展初期,面臨數據安全、內容安全、隱私保護、版權保護等許多問題需要努力解決。但可以預見,大模型將帶動云上AI算力急劇增長,AI算力的工作負載與通用算力的差距會越來越小,這會為各家云廠商帶來新的機會,同時也會對數據中心、軟硬件棧、PaaS平臺帶來新的挑戰。
火山引擎全力支持大模型發展,不讓任何創新因為算力不足而夭折。目前,火山引擎已經支持MiniMax、智譜、昆侖萬維等企業在大模型領域快速發展。
據MiniMax聯合創始人楊斌介紹,MiniMax與火山引擎合作建立了超大規模實驗平臺,實現千卡級常態化訓練;超大規模推理平臺有萬卡級算力池,支撐單日過億次調用。在火山引擎云上,MiniMax大模型業務實現快速突破。
譚待透露,火山引擎的大模型云平臺獲得智譜AI、昆侖萬維等眾多企業的良好反饋。國內大模型領域,七成以上已是火山引擎客戶。
譚待表示,堅信未來,大模型會在各個行業內不斷興起,行業專屬、企業專屬的大模型百花齊放,火山引擎也會全力支持好“多云多模型”的未來架構,不讓企業因為缺失計算能力而錯失創新。
在會上,火山引擎發布兩款AI新品,推動不同行業的云上智能創新爆發。
首先是“智能推薦-高速訓練引擎”,將模型的訓練推理效率進行極致優化,讓企業通過云服務享受與字節推薦一樣的智能推薦基礎設施。據悉,火山引擎智能推薦-高速訓練引擎軟硬一體優化,超高速訓練100GB-10TB+超大模型;同時,采用PS-Worker架構,在服務發現的基礎上,支持 PS、Chief、Worker 全方位容錯,基于字節內部的實踐,綜合成本可降低25%~67%
另外,機器學習平臺的重點功能也實現了全面升級。在發布實驗管理-模型效果對比功能方面,企業僅需極少代碼改動,上手簡單,并可以深入洞察訓練過程,實時跟蹤、對比訓練效果,觀察趨勢,加速模型迭代效率。
而在彈性方面,機器學習平臺則實現靈活資源調度,隨用隨取,助力企業敏捷迭代;同時,實現了更低的成本即可獲取優質資源,離線推理成本節省達70%。
升級后的機器學習平臺全面支持大模型,基于內部自研大模型訓練框架為客戶提供多模態、大模型、分布式訓練、云端大模型瘦身優化方案;超大規模并行,支持萬卡級別的訓練場景,讓大模型訓練更穩更快。
目前,國內“大模型狂飆”如火如荼,而火山引擎提供的高速訓練引擎和機器學習平臺,則無疑為大模型的訓練提供了更加優質的技術底座,勢必將為國內大模型的加速發展提供更有力的保障。(作者:羅晶晶)