IT之家 12 月 26 日消息,專家近期展開的一項(xiàng)研究表明,ChatGPT 所提供的建議,相比較人類專家提供的回復(fù)更平衡、更全面、更善解人意、更有幫助。
來自墨爾本大學(xué)和西澳大利亞大學(xué)的研究團(tuán)隊(duì)從十大熱門建議欄網(wǎng)站上,隨機(jī)挑選了 50 個(gè)社會困境問題。
該科研團(tuán)隊(duì)邀請了 404 名志愿者,盲測展示由專欄作家和 ChatGPT 所提供的答案,要求其回答哪個(gè)答案更平衡、更全面、更善解人意、更有幫助。
研究人員發(fā)現(xiàn),ChatGPT 在五個(gè)隨機(jī)提出的問題中的每一個(gè)和所有查詢類別中都“明顯優(yōu)于”人類顧問,支持人工智能的偏好率在 70% 到 85% 之間。
兩項(xiàng)調(diào)查都顯示,許多人發(fā)現(xiàn) ChatGPT 的建議比專業(yè)顧問的建議更平衡、更完整、更善解人意、更有幫助,而且總體上更好。在調(diào)查 1 的 404 名參與者和調(diào)查 2 的 401 名參與者中,大多數(shù)人在所有方面都投票贊成 ChatGPT。
該研究還表明,ChatGPT 參與者的答案比建議專欄作家的答案更長。在第二項(xiàng)研究中,研究人員縮短 ChatGPT 的回答內(nèi)容長度,確保其內(nèi)容長度和專欄作家回答相近。
第二項(xiàng)研究表明,雖然偏好率有所減少,但整體而言 ChatGPT 提供的回答更全面更優(yōu)秀。
盡管 ChatGPT 建議的質(zhì)量很高,但 77% 的受訪者依然表示,更喜歡人類專家給出的回答。
IT之家附上論文參考地址:
Howe Piers Douglas Lionel, Fay Nicolas, Saletta Morgan, Hovy Eduard,ChatGPT’s advice is perceived as better than that of professional advice columnists,2023,https://www.frontiersin.org/articles/10.3389/fpsyg.2023.1281255