今天小編分享的互聯網經驗:Meta下周推出開源Llama 3兩個版本,首個1400億大模型将于今夏發布,歡迎閱讀。
(圖片來源:Meta 公司)
Meta 最具影響力的 Llama 3 大語言模型(LLM)要來了。
钛媒體 App 4 月 9 日消息,據 The information 今晨報道,Meta Platforms 計劃下周推出即将推出的 Llama 3 大模型的兩個小參數版本。
這些模型将作為 Llama 3 最大版本的前身,預計整個 Llama 3 于 2024 年夏天推出。據報道,Llama 3 最高版本可能擁有超過 1400 億個參數。
這一發布可能會激發人們對即将推出的 Llama 3 的興奮。去年 7 月,Llama 2 推出,之後包括谷歌、埃隆 · 馬斯克的 xAI 和 Mistral 在内的多家公司已經發布了開源大模型。
而約一年後的今天,Llama 3 終于粉墨登場。據報道,Meta 希望 Llama 3 模型整體性能能夠趕上 OpenAI 最新的 GPT-4 Turbo 版本,但 Llama 3 下周公布的版本并不支持多模态技術。
截至發稿前,Meta 發言人拒絕置評。
具體來說,Meta 之前發布 Llama 2 的三個版本模型,分别包括 70 億、130 億、700 億參數版本,後者是最大參數模型,從而可以實現對模型落地的代碼編輯操作。
有消息稱,近幾個月來,由于 Meta 内部認定 Llama 2 回答過于保守,公司正努力讓 Llama 3 更加開放,回答更為準确的話題。
今年 1 月 19 日,Meta CEO 馬克 · 扎克伯格(Mark Zuckerberg)宣布,Meta 計劃将投入大量資源打造自己的通用人工智能(AGI),即在幾乎所有領網域達到或超越人類智能的人工智能,并盡可能地實現開源。只有開發全面的 AGI,才能為聊天機器人、創作者和企業等提供下一代所需的服務。
" 我們的長期願景是構建通用智能,負責任地開源,并使其廣泛可用,以便每個人都能受益。" 扎克伯格表示。
人員層面,目前他正将 Meta 現有的兩個團隊進行聯合,其一是聚焦 AI 基礎研究的團隊 "FAIR",其二是致力于為消費者開發生成式 AI 產品的團隊 "GenAI"。
算力層面,Meta 認為已經做好充分準備。扎克伯格透露,到 2024 年底,該公司将擁有大約 35 萬顆英偉達 H100 GPU,如果加上英偉達 A100 GPU 和其他 AI 芯片,Meta 擁有近 60 萬顆 GPU 庫存。
據扎克伯格透露,Meta 将于今年推出一款新產品,可以幫助用戶創建專屬的 AI 角色,并能将它們發布到 Meta 的社交應用中。
美國弗雷斯特研究公司的分析師迪潘揚 · 查特吉(Dipanjan Chatterjee)認為,鑑于該行業大力擁抱 AI,Meta 公司的轉變也并不令人意外," ‘每家公司現在都是一家科技公司’的說法,已經演變為每家公司現在都是一家 AI 公司。"
近日,福布斯公布了最新 2024 全球億萬富豪榜。扎克伯格是過去一年全球财富(身價)增長最多的人,由于過去一年 Meta 股價大漲,扎克伯格的淨資產也由此增長 1126 億美元,最新身價達 1770 億美元,而他在福布斯富豪榜上的排位,也從去年的第 16 位,大幅上升到了今年的第 4 位。
(本文首發钛媒體 App,作者|林志佳)