00:25Simon Willison’s Weblog(博客/媒体)Georgi Gerganov 在 Hacker News 评论中分享,过去一个半月他几乎每天都用 Qwen3.6-27B 模型处理编码任务,运行在 M2 Ultra 或 RTX 5090 上。他使用轻量级 pi agent(pi -nc --offline)搭配简短系统提示来适配个人编程风格。虽然主要用于 ggml-org 的琐碎维护任务,但认为该模型是高效的辅助工具。技巧Qwen3.6-27BGeorgi Gerganovpi本地模型编程助手推荐理由:Georgi Gerganov 亲测 Qwen3.6-27B 配合 pi agent,日常编程完全够用,本地运行无压力。原文
06:49Clement Delangue@ClementDelangue精选llama.cpp 新增 MTP(Multi-Token Prediction)支持,使本地模型推理速度大幅提升。在 A10G 上测试 Qwen3.6-27B 模型,生成速度从 25 tok/s 提升至 45 tok/s,增幅达 78%。这一优化让本地模型具备了作为日常驱动力的实用性,对本地部署和隐私敏感场景意义重大。开发者可直接在 llama.cpp 中启用 MTP 功能,体验更流畅的本地推理。AI模型llama.cppMTP/多令牌预测本地推理Qwen3.6-27B推理优化推荐理由:本地模型速度翻倍,做本地部署的开发者终于可以告别卡顿,建议直接试试 MTP 支持。原文