(ChinaZ.com) 4月7日 消息:近日,《華爾街日報》報道稱,人工智能公司在收集高質量訓練數據方面遇到了困難。隨后,《紐約時報》詳細介紹了一些公司處理這一問題的方法,其中涉及到了人工智能版權法的模糊灰色區域。
故事從OpenAI開始。該公司迫切需要訓練數據,據報道開發了Whisper音頻轉錄模型,轉錄了超過100萬小時的YouTube視頻來訓練其最先進的大型語言模型GPT-4。《紐約時報》報道稱,OpenAI知道這在法律上存在問題,但相信這是合理使用。OpenAI總裁格雷格·布羅克曼親自參與了所使用視頻的收集。
OpenAI發言人林賽·赫爾德告訴The Verge,該公司為每個模型策劃了"獨特"的數據集,并使用"眾多來源,包括公開數據和非公開數據的合作伙伴"。赫爾德還表示,該公司正在考慮生成自己的合成數據。
據《紐約時報》消息人士透露,谷歌也從YouTube收集了文字記錄。谷歌發言人馬特·布萊恩特表示,該公司"根據我們與YouTube創作者的協議,在一些YouTube內容上訓練了模型"。
Meta同樣也遇到了良好訓練數據可用性的限制。該公司在努力追趕OpenAI的過程中,曾考慮未經許可使用版權作品的情況,包括支付圖書許可費用或直接收購一家大型出版商。
這些公司正在努力應對模型訓練數據快速蒸發的問題。《華爾街日報》本周撰文稱,到2028年,公司可能會超越新內容。解決方案包括對模型創建的"合成"數據進行訓練,或采用"課程學習"方法。但這些公司的另一個選擇是使用他們能找到的任何東西,無論他們是否獲得許可,這可能會引發版權法方面的擔憂。