模型中美对照71°23:15DeepSeek 疑似在新架构上推进,V4.1 或将采用 YOCO 相关设计有人推测 DeepSeek V4.1 会用 YOCO 这类新架构,如果靠谱,KV 缓存开销可能大幅下降,架构党可以留意。#DeepSeek#YOCO#V4.1#开源模型Teortaxes@teortaxesTex原文稍后读已读值得跟进有用关注 DeepSeek
论文精选12:06CLSA:跨层稀疏注意力实现7.6倍解码加速长上下文推理的瓶颈终于有了系统级解法——CLSA通过共享路由索引同时加速预填充、缓存和解码,做LLM推理优化的团队值得看看这个架构思路。#稀疏注意力#长上下文#推理加速#KV缓存aarXiv cs.AI@Yutao Sun 等 5 人原文稍后读已读值得跟进有用关注 稀疏注意力