NeurIPS 2024|SparseLLM:突破性全局剪枝技术,大语言模型稀疏化革命 关键词: AI,SparseLLM,模型训练,稀疏化 该研究主要探讨了大语言模型的全局剪枝方法,旨在提高预训练语言模型的效率。该成果的发表为大模型的剪枝与优化研究提供了新的视角,并在相关领域具有重要的应用潜力。 来自主题: AI技术研报 3922 点击 2024-10-10 17:17
单GPU就能压缩模型,性能不变参数少25%!微软提出模型稀疏化新方法 关键词: GPU,模型稀疏化,模型训练,SliceGPT 大语言模型之大,成本之高,让模型的稀疏化变得至关重要。 来自主题: AI技术研报 4655 点击 2024-02-21 16:51