黄仁勋与扎克伯格最新实录：Meta的开源哲学是从哪来的？
黄仁勋与扎克伯格最新实录：Meta的开源哲学是从哪来的？自 1974 年在科罗拉多州博尔德市首次举办以来，SIGGRAPH一直是展示计算机图形领域开创性研究的一个主要平台。
来自主题: AI资讯
8655 点击 2024-07-30 16:02
# 热门搜索 #
大模型
人工智能
openai
融资
chatGPT
自 1974 年在科罗拉多州博尔德市首次举办以来，SIGGRAPH一直是展示计算机图形领域开创性研究的一个主要平台。
小模型成了AI公司们降本增效的利器。
在Meta的Llama 3.1训练过程中，其运行的1.6万个GPU训练集群每3小时就会出现一次故障，意外故障中的半数都是由英伟达H100 GPU和HBM3内存故障造成的。
一半以上的故障都归因于 GPU 及其高带宽内存。
Meta 发布 Llama 3.1 405B，开放权重大模型的性能表现首次与业内顶级封闭大模型比肩，AI 行业似乎正走向一个关键的分叉点。扎克伯格亲自撰文，坚定表明「开源 AI 即未来」，再次将开源与封闭的争论推向舞台中央。
最近，Latent Space发布的播客节目中请来了Meta的AI科学家Thomas Scialom。他在节目中揭秘了Llama 3.1的一些研发思路，并透露了后续Llama 4的更新方向。
紧跟着Meta的重磅发布，Mistral Large 2也带着权重一起上新了，而且参数量仅为Llama 3.1 405B的三分之一。不仅在编码、数学和多语言等专业领域可与SOTA模型直接竞争，还支持单节点部署。
AI 竞赛正以前所未有的速度加速，继 Meta 昨天推出其新的开源 Llama 3.1 模型之后，法国 AI 初创公司 Mistral AI 也加入了竞争。
大模型格局，再次一夜变天。Llama 3.1 405B重磅登场，在多项测试中一举超越GPT-4o和Claude 3.5 Sonnet。史上首次，开源模型击败当今最强闭源模型。小扎大胆豪言：开源AI必将胜出，就如Linux最终取得了胜利。
最强大模型Llama 3.1，上线就被攻破了。