AITP
精选全部 AI 动态AI 日报Agent 接入关于更新日志信源提报反馈
登录 / 注册
AITOP

S4oP

共 1 条相关 AI 资讯
6月17日
11:26
11:26官方账号arXiv cs.LG@Marco Deano, Filippo Ziche, Nicola Bombieri
论文提出S4oP,一种增量式运算符级剪枝方法,针对S4和S4D结构状态空间模型。该方法通过交替结构化掩码和微调逐步剪枝运算符。实验在多个基准数据集上表明,剪枝70%的模型运算符仍能保持原模型性能,同时显著降低推理延迟。这是首次系统研究SSM的结构化运算符剪枝。
论文S4oPS4S4DSSM模型剪枝

推荐理由:这篇论文把S4模型剪掉70%计算量还能保持性能,想在小设备上跑S4模型可以看看。
原文
精选全部日报登录