AIGC動態歡迎閱讀
原標題:Meta公布Llama 3訓練集群細節!儲備60萬塊H100迎接AGI
關鍵字:集群,人工智能,性能,網絡,模型
文章來源:新智元
內容字數:8177字
內容摘要:
新智元報道編輯:潤
【新智元導讀】LLM開源從Infra做起!Meta公布了自己訓練Llama 3的H100集群細節,看來Llama 3快來了。每年3月份,照例各家大廠又要開始秀自己最新的產品和研究了。
OpenAI剛剛發布了震驚世人的Sora,最新的ChatGPT版本似乎也是箭在弦上。
谷歌更是舉全公司之力,從去年底就開始放出了包括Gemini Ultra,Gemini 1.5,Gemma在內,各分支賽道上的驚艷成果。
可是作為開源AI的扛把子,Meta在去年發布了Llama 2和后續的模型后,就一直缺少有影響力的產品問世。
而對于開源社區來說,OpenAI雖好,可Meta才是大家真的衣食父母。大家都在翹首以待Llama 3的發布。
在Llama 3公開之前,不甘寂寞的Meta還是想到辦法在行業內刷了一波存在感——秀肌肉。
Meta AI剛剛發表了一份技術博客,向公眾展示了自己擁有的算力資源,以及Meta布局AI Infra的具體細節和路線圖。
根據Meta的規劃,到2024年底它將擁有35萬個英偉達H100GPU,而未來算力儲備將達到夸張的60萬個H100。
而光有大量的GPU還
原文鏈接:Meta公布Llama 3訓練集群細節!儲備60萬塊H100迎接AGI
聯系作者
文章來源:新智元
作者微信:AI_era
作者簡介:智能+中國主平臺,致力于推動中國從互聯網+邁向智能+新紀元。重點關注人工智能、機器人等前沿領域發展,關注人機融合、人工智能和機器人對人類社會與文明進化的影響,領航中國新智能時代。
? 版權聲明
文章版權歸作者所有,未經允許請勿轉載。
相關文章
暫無評論...