
Transformer还不够好,它的作者决定让大模型自主进化
Transformer还不够好,它的作者决定让大模型自主进化让大模型自己动手,好过让人类动手。黄仁勋对话Transformer八子时,最后一位离开谷歌的论文作者Llion Jones,相信这是大模型技术的关键趋势。他还卖了个关子,预告他创立的Sakana AI马上就有大动作。
让大模型自己动手,好过让人类动手。黄仁勋对话Transformer八子时,最后一位离开谷歌的论文作者Llion Jones,相信这是大模型技术的关键趋势。他还卖了个关子,预告他创立的Sakana AI马上就有大动作。
今年GTC大会上,英伟达推出了地表最强Blackwell计算平台、NIM推理微服务、Omniverse Cloud API等惊喜新品。其中Blackwell GPU具有2080亿个晶体管,AI算力直接暴涨30倍。单芯片训练性能(FP8)是Hopper架构的2.5 倍,推理性能(FP4)是Hopper架构的5倍。具有第5代NVLink互连,并且可扩展至576个GPU。
8年时间,英伟达AI芯片的算力增长了1000倍。当地时间3月18日,英伟达在2024 GTC大会上发布了多款芯片、软件产品。 创始人黄仁勋表示:“通用计算已经失去动力,现在我们需要更大的AI模型,更大的GPU,需要将更多GPU堆叠在一起。这不是为了降低成本,而是为了扩大规模。”
李飞飞在GTC谈AI与人性、未来的责任与角色。如果说去年的GTC炉边谈话,黄仁勋与OpenAI首席科学家Illya进行的是一场对技术未来的漫谈,那今年这场炉边谈话就是李飞飞对人类未来的呼吁。
英伟达GTC大会来到第二天,除了首日的CEO黄仁勋主题演讲,还有近800场会议讨论和技术培训在后续这3天陆续举行。AI领域的世界大聚会,有当红炸子鸡OpenAI出现的场子当然是最热的。
如果说去年的GTC炉边谈话,黄仁勋与OpenAI首席科学家Illya进行的是一场对技术未来的漫谈,那今年这场炉边谈话就是李飞飞对人类未来的呼吁。
「这才是我理想中的 GPU。」—— 黄仁勋。
2024年3月18日的GTC上,黄仁勋正式成了新的乔布斯。
最新报道澄清,“AI的尽头是光伏和储能”并非黄仁勋的原话。AI发展的确依赖于能源创新,当今科技圈的两位大佬,OpenAI创始人阿尔特曼和马斯克此前已给出明确观点。当下的重点在于开源,风能、光伏等可再生新能源被视作数据中心重要的能量池,核能尤其被寄予厚望
英伟达CEO黄仁勋在最近的斯坦福活动上预测说,AI会在五年内通过人类测试,AGI将很快到来。而谷歌一位工程师前不久恰巧发出了一篇长文硬核分析,认为2028年有10%概率实现AGI,佐证了老黄的观点。