英伟达再出手！新型混合架构模型问世，两大创新实现53.6倍吞吐提速
英伟达再出手！新型混合架构模型问世，两大创新实现53.6倍吞吐提速Transformer 架构对计算和内存的巨大需求使得大模型效率的提升成为一大难题。为应对这一挑战，研究者们投入了大量精力来设计更高效的 LM 架构。
来自主题: AI技术研报
5635 点击 2025-08-27 11:46
# 热门搜索 #
大模型
人工智能
openai
融资
chatGPT
Transformer 架构对计算和内存的巨大需求使得大模型效率的提升成为一大难题。为应对这一挑战，研究者们投入了大量精力来设计更高效的 LM 架构。
Jet-Nemotron是英伟达最新推出的小模型系列（2B/4B），由全华人团队打造。其核心创新在于提出后神经架构搜索（PostNAS）与新型线性注意力模块JetBlock，实现了从预训练Transformer出发的高效架构优化。
英伟达开源又放大招了！ 韩松团队推出了一款全新的基于后神经架构搜索的高效语言模型——Jet-Nemotron。