马斯克最大算力中心建成了:全球首个GW级超算集群,再创世界纪录
马斯克最大算力中心建成了:全球首个GW级超算集群,再创世界纪录刚刚,全球首个GW级超算集群Colossus 2,正式投入运行。
来自主题: AI资讯
6677 点击 2026-01-19 15:15
刚刚,全球首个GW级超算集群Colossus 2,正式投入运行。
2022年,Google Cloud 将π计算到100万亿位,在2025年,高性能计算界的知名评测机构 StorageReview只用了4个月的时间,花了不到一千美元电费就将π算到314万亿位,这可不是为了炫技,而是说明高性能计算也可以很节能。
两天前,马斯克得意自曝:团队仅用122天,就建成了10万张H100的Colossus集群,未来还会扩展到15万张H100和5万张H200。此消息一出,奥特曼都被吓到了:xAI的算力已经超过OpenAI了,还给员工承诺了价值2亿期权,这是要上天?
马斯克xAI建超算集群,以太网助AI云迅猛发展。
是时候用CPU通用服务器跑千亿参数大模型了!
马斯克官宣xAI建造的世界最大超算集群,由10万块H100搭建,预计本月末开始投入训练。另一边,OpenAI再次加码,将打造由10万块GB200组成的超算,完全碾压xAI。
世界上最快超算集群Frontier,用8%的GPU训练出了一个万亿级规模的大模型,而且是在AMD硬件平台之上完成。研究人员将训练的细节和克服的困难写成了一篇论文,展示了如何用非英伟达的生态完成大模型训练的技术框架和细节。