【ITBEAR科技資訊】12月25日消息,蘋果公司與哥倫比亞大學的研究團隊于2023年10月發布了一款名為Ferret(雪貂)的多模態開源LLM,然而,當時這一新聞并未引起廣泛的注意。
許多人工智能領域的從業者錯過了Ferret的發布,他們對蘋果進入開源LLM領域感到意外,尤其考慮到蘋果一直被視為一個"封閉花園"的公司。
今天早上,歐洲一家專注于醫學領域開源人工智能的非營利組織的Bart de Witte在社交平臺X上發帖:“我不知道怎么錯過了這個,但蘋果在10月份加入了開源人工智能社區。Ferret的發布證明了蘋果在深度影響人工智能研究方面的承諾,鞏固了其在多模態人工智能領域的領導地位......ps:我期待有一天,本地大型語言模型(LLLMs)會成為重新設計的iOS的一部分,運行在我的iPhone上?!?/p>
科技博客作者和VentureBeat的撰稿人Ben Dickson在LinkedIn上寫道:“2023年最令人意外的人工智能發展是什么?對我來說,就是蘋果發布了開源LLM(盡管是非商業許可)?!?/p>
Ferret是以非商業許可證開源的,這意味著當前版本不能用于商業用途。然而,它有可能被應用于蘋果未來的產品或服務中。蘋果AI/ML研究科學家Zhe Gan在去年10月的一條推文中解釋了Ferret的用途,稱它可以"在圖像中的任何位置、粒度上引用和定位任何物體",并能夠使用圖像中的任何形狀的區域來實現這一功能。
簡而言之,Ferret可以檢查圖像上繪制的區域,識別其中的元素,并將其標識出來。然后,它可以將這些識別到的元素作為查詢的一部分,并以通常的方式進行響應。例如,用戶可以在圖像中突出顯示一只動物并詢問其種類,Ferret可以識別出這只動物的種類,并了解用戶指的是圖像中的特定動物。它還可以利用圖像中其他元素的上下文提供更多的信息。
Ferret的發布對于研究人員來說具有重要意義,表明蘋果正在逐步開放其人工智能研究,這與其過去神秘封閉的形象形成了鮮明對比。此外,蘋果還面臨著基礎設施方面的挑戰。盡管蘋果正在努力擴大其擁有的AI服務器數量,但與像ChatGPT等模型相比,其規模可能仍然不足。除了與其他公司合作擴展其能力之外,開源模型也是蘋果正在探索的另一條途徑。
一個有趣的細節是,Reddit的r/Apple版塊發現Ferret "使用了8個帶有80GB顯存的A100 GPU進行訓練"??紤]到蘋果過去與英偉達GPU的支持關系,這被視為對英偉達的罕見認可。