AI资讯新闻榜单内容搜索-训练集

关键词: 字节AI,NeurIPS,AI实习生,田柯宇

太戏剧了！攻击字节训练集群的实习生，居然刚刚获得了NeurIPS 2024最佳论文奖？虽然看起来像爽文剧情，但这位高材生接下来的路，应该是难走了。

关键词: AI,AI芯片,AI训练集群,AI基础设施

2024年7月22日凌晨，xAI创始人Elon Musk在推特上正式宣布，在凌晨4:20分正式启动了世界上最强的AI训练集群。 这个训练集群建设在美国田纳西州孟菲斯市，集合了10 万个液冷H100芯片。

关键词: 数据集,AI,Vec2Face,模型训练

一个高质量的人脸识别训练集要求身份 (ID) 有高的分离度（Inter-class separability）和类内的变化度（Intra-class variation）。

关键词: Scaling Law,GPT-6,AI,模型训练

9 月 2 日，马斯克发文称，其人工智能公司 xAI 的团队上线了一台被称为「Colossus」的训练集群，总共有 100000 个英伟达的 H100 GPU。

关键词: AI,智算中心,Colossus,训练集群

马斯克又搞出了一个超级厉害的东西——人工智能训练集群Colossus！

关键词: Llama3,AI,豆包大模型,模型训练

伴随大模型迭代速度越来越快，训练集群规模越来越大，高频率的软硬件故障已经成为阻碍训练效率进一步提高的痛点，检查点（Checkpoint）系统在训练过程中负责状态的存储和恢复，已经成为克服训练故障、保障训练进度和提高训练效率的关键。

关键词: Llama 3.1,H100,AI芯片,GPU

在Meta的Llama 3.1训练过程中，其运行的1.6万个GPU训练集群每3小时就会出现一次故障，意外故障中的半数都是由英伟达H100 GPU和HBM3内存故障造成的。

关键词: 马斯克,AI,AI集群,H100,算力

10万块液冷H100正式开工，马斯克19天建成世界最强AI训练集群。

关键词: 大模型,AI,模型训练,Transformer

生成式模型原本被设计来模仿人类的各种复杂行为，但人们普遍认为它们最多只能达到与其训练数据中的专家相当的水平。不过，最新的研究突破了这一限制，表明在特定领域，如国际象棋，通过采用低温采样技术，这些模型能够超越它们所学习的那些专家，展现出更高的能力。

关键词: ARC-AGI,GPT-4o,LLC,LLM,大模型

号称不可能轻易被击败的AGI基准ARC-AGI被GPT-4o撼动，GPT-4o以在公共测试集50%、在训练集71%的准确率成为了新的SOTA！