用 Mamba 把金字塔相邻尺度织在一起做轻量人脸检测,0.34M 参数就在 WIDER FACE 上拿到 91.41% mAP,Hard 集也稳,代码还开源了。
#状态空间模型
共 18 条 · 7 天 1 条 · 30 天 4 条
信息流里打上「状态空间模型」标签的资讯、产品与论文,按刊登时间排,新的在上。
10月6日
WeaveFace:用 Mamba 交叉尺度融合做轻量人脸检测
9月29日
9月22日
论文10:12
SAE 对比研究:Mamba 与 Pythia 潜在表征 99.98% 对齐有人拿 SAE 逐个对比 Mamba 和 Pythia 的内部特征,99.98% 几乎一样,做可解释性的可以看看。
9月4日
8月26日
8月19日
8月18日
论文15:36
CardiacMamba:状态空间模型融合RGB与RF实现公平鲁棒心率估计想搞非接触心率监测的可以看看,它把RGB和射频信号融合,肤色偏见和光照干扰都压下去了,EquiPleth上误差不到1 bpm。
8月5日
论文12:05
Muon相遇Mamba:状态空间模型的谱优化Muon优化器之前都在Transformer上测试,这篇论文把它用到Mamba-2 130M上,发现输出投影用Muon最划算,训练效率更高,值得看看。
8月4日
7月4日
6月17日
6月9日
5月28日
CaMBRAIN:首个因果状态空间模型实现实时连续EEG推理
做脑机接口或神经信号处理的团队终于有了能实时处理长序列 EEG 的工具——CaMBRAIN 解决了注意力机制的计算瓶颈,吞吐量提升 10 倍,做实时监测或临床诊断的开发者可以直接用。
5月27日
5月26日
Transformer 也需要睡眠:周期性记忆巩固机制提升长程推理
这项研究给长上下文推理带来了新思路——用类似睡眠的离线巩固机制解决注意力瓶颈,做长链推理或复杂数学问题的开发者值得关注,尤其适合处理超长上下文的场景。
5月14日
QLAM:量子长注意力记忆,用量子叠加增强长序列建模
做长序列建模或量子机器学习的研究者值得关注——QLAM 用量子叠加解决了 SSM 记忆能力不足的问题,在标准基准上已跑赢 Transformer,建议点开看实现细节。
5月11日
论文11:42
EmambaIR:事件引导图像重建的高效状态空间模型该工作为状态空间模型在高分辨率事件相机图像重建中提供了高效可行的方案,有助于推动实时视觉系统与边缘计算部署。
arXiv cs.AI原文