IT之家 12 月 26 日消息,專家近期展開的一項研究表明,ChatGPT 所提供的建議,相比較人類專家提供的回復更平衡、更全面、更善解人意、更有幫助。
來自墨爾本大學和西澳大利亞大學的研究團隊從十大熱門建議欄網站上,隨機挑選了 50 個社會困境問題。
該科研團隊邀請了 404 名志愿者,盲測展示由專欄作家和 ChatGPT 所提供的答案,要求其回答哪個答案更平衡、更全面、更善解人意、更有幫助。
研究人員發現,ChatGPT 在五個隨機提出的問題中的每一個和所有查詢類別中都“明顯優于”人類顧問,支持人工智能的偏好率在 70% 到 85% 之間。
兩項調查都顯示,許多人發現 ChatGPT 的建議比專業顧問的建議更平衡、更完整、更善解人意、更有幫助,而且總體上更好。在調查 1 的 404 名參與者和調查 2 的 401 名參與者中,大多數人在所有方面都投票贊成 ChatGPT。
該研究還表明,ChatGPT 參與者的答案比建議專欄作家的答案更長。在第二項研究中,研究人員縮短 ChatGPT 的回答內容長度,確保其內容長度和專欄作家回答相近。
第二項研究表明,雖然偏好率有所減少,但整體而言 ChatGPT 提供的回答更全面更優秀。
盡管 ChatGPT 建議的質量很高,但 77% 的受訪者依然表示,更喜歡人類專家給出的回答。
IT之家附上論文參考地址:
Howe Piers Douglas Lionel, Fay Nicolas, Saletta Morgan, Hovy Eduard,ChatGPT’s advice is perceived as better than that of professional advice columnists,2023,https://www.frontiersin.org/articles/10.3389/fpsyg.2023.1281255