【ITBEAR科技資訊】8月10日消息，近日，清華大學新聞與傳播學院的研究團隊公布了一份題為《大語言模型綜合性能評估報告》的重要研究成果。該報告對多個大型語言模型進行了全面評估，涵蓋了生成質量、使用與性能、安全與合規等三大維度共計20項指標。
根據這份報告，通過對GPT-4、ChatGPT 3.5、百度文心一言、通義千問、訊飛星火、Claude以及天工等七個大型語言模型的評測，文心一言在綜合評分方面在國內排名第一，尤其在中文語義理解領域表現出色，憑借其卓越的中文理解能力以及對中國文化的深刻理解，超越了GPT-4在部分中文能力方面的表現。
值得注意的是，在生成質量方面，報告綜合考量了語義理解、輸出表達以及適應性等方面的評測指標，百度文心一言以76.98%的得分率位列第二，僅次于GPT-4，勝過了包括ChatGPT在內的其他競爭對手。尤其在部分中文語義理解能力上，文心一言更是以92%的得分率穩居榜首。
在安全合規領域，報告綜合考察了內容安全性、偏見和公平性以及隱私保護等方面的綜合評測，百度文心一言以78.18%的得分率與GPT-4并列領先。
據ITBEAR科技資訊了解，這份報告的發布為大型語言模型的發展和比較提供了有力的參考依據，同時也為語言模型領域的技術創新提供了重要的方向。這樣的研究助力于不斷提升大型語言模型在多個維度上的表現，進一步推動了人工智能領域的發展。
