【ITBEAR科技資訊】7月31日消息,近日,金融時報(FT)揭露了AI公司Anthropic在數據收集方面的不當行為。盡管Anthropic聲稱其宗旨是“負責任地開發AI”,但該公司被指通過其ClaudeBot機器人過度爬取網站數據,以訓練其Claude大語言模型。
在人工智能行業中,利用網絡爬蟲抓取數據是一種普遍做法,然而,Anthropic因其數據抓取的激進程度而受到多方批評。有報道稱,自由職業者網站Freelancer在短短四小時內被ClaudeBot訪問了高達350萬次,導致其不得不采取屏蔽措施以應對這種過度抓取。
據ITBEAR科技資訊了解,批評者指出,Anthropic在數據抓取過程中無視了網站的robots.txt協議,強行獲取數據。這一行為與該公司所宣稱的“負責任的AI”開發理念背道而馳。此外,維修團隊iFixit的首席執行官Kyle Wiens也在社交媒體上表達了對Anthropic的不滿,他質疑Anthropic在24小時內訪問其服務器高達100萬次的必要性,并指出這種大量未付費的流量占用了其開發資源。
Kyle Wiens在推文中表示,盡管他們的服務條款已明確禁止通過類似方式使用其內容,但Anthropic似乎并未遵守。他同時表示,如果Anthropic有意就內容的商業使用許可進行協商,他們愿意展開溝通。這一事件再次引發了關于人工智能公司如何負責任地使用網絡數據的討論。