AITP
精选全部 AI 动态AI 日报Agent 接入我的简报我的追踪阅读偏好内容方法关于更新日志信源提报反馈
外观
登录 / 注册
AITOP

Gemma3

共 1 条相关 AI 资讯
8月19日
11:39
11:39官方账号arXiv cs.LG@Michael C. Mozer, Shoaib Ahmed Siddiqui, Danny Sawyer, Sunny Sanyal, Rosanne Liu
Recirculation技术为现成基础模型提供推理时架构增强,在Gemma3系列上实现困惑度降低23%。该方法在生成过程中几乎不增加延迟,但在预填充阶段需要串行处理。自适应变体在冻结原始模型权重的同时仅需轻微调整超参数,在GSM8k基准测试上准确率提高21%。该技术通过利用模型自身特性指导架构修改,实现了训练-free的显著性能提升。
论文RecirculationGemma3推理模型

推荐理由:研究人员提出Recirculation技术,让Gemma3模型困惑度降23%,准确率提21%,还不增加推理延迟。
原文
精选全部日报登录