【ITBEAR科技資訊】10月30日消息,百川智能今日宣布推出了全新的Baichuan2-192K大模型,開創了全球最長的上下文窗口記錄。這一創新模型具有令人矚目的上下文處理能力,其上下文窗口長度達到了驚人的192K,能夠處理高達35萬個漢字的文本,為用戶提供了前所未有的語義信息豐富性。
據ITBEAR科技資訊了解,百川智能表示,Baichuan2-192K在支持長上下文窗口方面表現卓越,比目前最優秀的大模型Claude2(100K上下文窗口,實測約8萬字)提高了4.4倍,并且比GPT-4(支持32K上下文窗口,實測約2.5萬字)提高了14倍,這將使用戶在自然語言處理領域獲益匪淺。
上下文窗口長度是大型模型的核心技術之一,通過擴大上下文窗口,模型可以更好地理解文本背后的語境,提高上下文相關性和語義信息的豐富性,減少歧義,從而更準確、流暢地生成內容,提高了模型的整體性能。
Baichuan2-192K在多個評測集上表現出色,包括Dureader、NarrativeQA、LSHT、TriviaQA等10項中英文長文本問答和摘要任務,其中有7項已經達到了最佳表現。
百川智能宣布,Baichuan2-192K將以API調用和私有化部署的方式提供給企業用戶。目前,他們已啟動了Baichuan2-192K的API內測,并將首先向法律、媒體、金融等行業的核心合作伙伴開放,以推動自然語言處理技術的應用和發展。這一創新將為各行各業的企業用戶提供更強大的文本處理工具,幫助他們提高工作效率和數據分析的準確性。