7月3日,經北京大學、清華大學、浙江大學、中國傳媒大學等高校教授的學術指導,北京智源研究院、中國經濟傳媒協會聯合新京報共同發布的《大語言模型傳媒方向能力測評調研報告》備受關注。測評報告涵蓋了包括訊飛星火、文心一言、通義千問在內的9大國內主流大模型產品。
報告的評估體系涵蓋了文本生成、事實核查與價值觀判斷、媒體信息檢索、翻譯能力以及長文本處理等五個關鍵能力維度,全面反映了媒體行業對AI技術的需求和期待。值得注意的是,如果將本次測評報告中所有五項維度的平均分進行橫向比較,大模型的翻譯能力得分6.42排名第一,可見傳媒從業者對于大模型進行翻譯工作的成效相較其他工作滿意度更高。在這一單項評測中,訊飛星火得分6.84排名第一。
作為人工智能“國家隊”成員,科大訊飛星火大模型在傳媒方向能力評測中取得這一成績并不意外,尤其在智能翻譯方面,科大訊飛有著深厚的技術積累和持續的技術創新。在剛剛舉行的國家科學技術獎勵大會中,科大訊飛主導的《多語種智能語音技術及產業化》項目摘得國家科學技術進步獎一等獎,這是深度學習引發的新一代人工智能全球浪潮以來,人工智能項目首次榮獲中國科技領域最高榮譽。
值得一提的是,本次貝殼財經峰會大模型評測報告的評測版本為訊飛星火V3.5,而在6月27日,科大訊飛全新發布了訊飛星火大模型V4.0,宣布全面對標GPT-4 Turbo,并在文本生成、語言理解、知識問答、邏輯推理、數學能力等方面實現超越,在國內外中英文12項大模型主流測試集中,訊飛星火在其中8個測試集排名第一。
訊飛星火V4.0帶來底座能力提升的同時,全新發布的星火企業智能體平臺也成為備受傳媒行業歡迎的大模型產品。智能體平臺的“任務鏈”功能可以自動鏈接外部權威信源,“知識庫”功能可以自動鏈接企業內部知識系統,打通內外信息鴻溝。媒體人士表示:“無論內部信息的縱向挖掘,還是外部信息的橫向整合,智能體平臺不僅提升媒體行業工作效率,對于從業人員的工作方式也將帶來深遠影響。”