Pine 發(fā)自 凹非寺
量子位 | 公眾號 QbitAI
又一“人類飯碗”被AI搶走，還是和訓練AI息息相關的：
數(shù)據(jù)標注。
蘇黎世大學研究發(fā)現(xiàn)，在ChatGPT面前，無論成本還是效率，人類可以說是毫無優(yōu)勢：
- 成本上，ChatGPT平均每個標注成本低于0.003美元，比眾包平臺便宜20倍；
- 效率上，在相關性、立場、主題等任務中，ChatGPT也是以4:1的優(yōu)勢“碾壓”人類。
論文發(fā)出后，有網(wǎng)友調侃，“生成訓練數(shù)據(jù)需要人工”的說法已經成為過去式了。
還有人直呼“古籍修復數(shù)字化工作是不是有希望提速了”。
還有人看熱鬧不嫌事大，直接發(fā)推稱：
這是直接端了平臺工作者的飯碗。
話說回來，ChatGPT是怎么搶了數(shù)據(jù)標注工作者的“飯碗”的？
ChatGPT在80%任務上占優(yōu)勢
首先得先了解下數(shù)據(jù)標注工作的具體內容。
簡單來講，數(shù)據(jù)標注就是給社交媒體上的內容數(shù)據(jù)貼標簽，將其以不同主題或者概念進行分類，或是對其立場以及情緒進行判別。
這些經過標注的數(shù)據(jù)就可以用作NLP模型的訓練集或是評估標準。
以往，這類工作都是交由人工處理的，比如說MTurk就是專門進行數(shù)據(jù)標注的一個眾包平臺。
在MTurk這類眾包平臺內部，還會有更加精細的分工，比如說會有經過專業(yè)訓練的數(shù)據(jù)標注者以及眾包工作者。
前者在產出高質量數(shù)據(jù)上具有優(yōu)勢，但自然成本也更高，而后者雖然更便宜但質量也會隨任務難度波動。
于是研究團隊就開始著手研究大語言模型 （LLM）在這方面的潛力，并且對比了沒有額外訓練 （zero-shot）的ChatGPT （基于GPT-3.5）和MTurk在數(shù)據(jù)標注上的性能。
這項對比基于研究團隊此前收集到的2382條推文樣本。
ChatGPT和MTurk分別將推文以“相關性、立場、主題、政策、實用性”這五種任務進行標注。
評估的標準有兩條：
- 準確性：ChatGPT和MTurk眾包工作者相較于正確標注的百分比；
- 編碼者間的一致性信度：用ChatGPT、MTurk眾包工作者以及專業(yè)數(shù)據(jù)標注者任意二者之間的一致性來計算；
結果呢也顯而易見，在 準確性上，ChatGPT有五分之四的任務都要優(yōu)于MTurk眾包工作者。
在 一致性信度上，ChatGPT全部任務都超過了專業(yè)數(shù)據(jù)標注者。
成本方面，開頭也已經提過，ChatGPT平均每條比人工便宜20倍，何況AI還能24*7無休。
不過對于研究團隊得出的這個結論并不是所有網(wǎng)友都買賬，有人表示：
這五條任務都太單一了，難度也是。僅憑這一點就得出這樣的結論可靠性存疑。
甚至還有網(wǎng)友嘲諷了起研究樣本太少來：
（竟然）只用 2382條推文做樣本。
“飯碗威脅”不止數(shù)據(jù)標注
現(xiàn)在，AI會不會完全取代某一類工作還不好說，但它會在一定程度上影響人類工作是毋庸置疑的。
上周，OpenAI就發(fā)布過一份分析報告，稱有80%的工作都會在一定程度上受到ChatGPT的影響，19%的崗位會受到ChatGPT的嚴重沖擊。
并且薪資越高的職業(yè)受到的沖擊就越大。
OpenAI還進一步列出了會被影響的 具體職業(yè)，從大到小依次是：
翻譯從業(yè)者、文字創(chuàng)作者 （包括詩人、作家等）、公關人員、數(shù)學家、稅務編制人員、區(qū)塊鏈工程師、財務工作者、媒體從業(yè)者……
△圖源：OpenAI
除此之外，OpenAI的CEO奧特曼也不止在一個場合下說過“AI會取代現(xiàn)有的部分工作”。
前不久，MidjourneyV5大升級也是讓不少人類畫師直呼飯碗不保。
emmmmmm，你覺得你的飯碗還保得住嗎？
— 完—
【AIGC 技術探索與應用創(chuàng)新】
4月13日「掘金城市沙龍·北京站」
限量免費參會！
從 ChatGPT看， AI 模型服務化趨勢是怎樣的？AIGC 新時代下， 文本智能創(chuàng)作面臨什么樣的變革？如何 輕松訓練 AIGC 大模型？基于大模型的 AIGC 工作原理和 應用場景是什么樣？
暢聊「AIGC 技術探索與應用創(chuàng)新」， 字節(jié)跳動 AI Lab算法工程師陳家澤、 英特爾AI軟件工程師楊亦誠、 google Cloud機器學習專家王順、 清華大學 KEG知識工程實驗室研究助理鄭勤鎧、 九合創(chuàng)投 COO張少宇、 稀土掘金江昪等多位業(yè)界專家已集結完畢！
4月13日下午， 北京大鐘寺地鐵站方恒時尚中心，邀你線下參會，更有多款稀土掘金原創(chuàng)周邊等你來！
