AITP
精选全部 AI 动态AI 日报Agent 接入我的简报我的追踪阅读偏好内容方法关于更新日志信源提报反馈
外观
登录 / 注册
AITOP

浏览器推理

共 4 条相关 AI 资讯
8月12日
22:01
22:01官方账号Clement Delangue@ClementDelangue
精选
Hugging Face 的 Transformers.js 成为最受欢迎的开源浏览器内 AI 运行库,月下载量突破 1000 万,较六个月前增长近 10 倍。该库支持在浏览器中直接运行 AI 模型,无需服务器,兼具免费与隐私优势。Hugging Face CEO 表示,在算力短缺和网络攻击风险增加的背景下,本地 AI 需求日益迫切。
AI产品Transformers.jsHugging Face本地AI

推荐理由:Hugging Face 的 Transformers.js 月下载量破千万,直接在浏览器跑模型,免费又私密,比半年前涨了快 10 倍。
原文
7月15日
15:46
15:46官方一手marktechpost@Michal Sutter
76°
Google于2026年7月9日发布LiteRT.js,这是LiteRT的JavaScript绑定,可在浏览器中通过WebAssembly运行.tflite模型。运行时支持XNNPACK on CPU、ML Drift over WebGPU以及实验性WebNN for NPUs。官方称相比其他web运行时性能提升3倍,GPU/NPU路径相比自身CPU路径快5-60倍。注意:tensor需手动管理并必须显式删除。
AI产品LiteRT.jsLiteRTWebGPU

推荐理由:Google出了LiteRT.js,浏览器里直接跑.tflite模型,GPU加速比CPU快5-60倍,不过记得自己删tensor。
原文
6月23日
08:12
08:12官方账号Simon Willison’s Weblog(博客/媒体)
Simon Willison在Hacker News发现Moebius 0.2B图像修复模型,声称拥有10B级性能,原本需PyTorch与CUDA。他决定利用Claude Code在终端辅助下,通过ONNX Runtime Web的WebGPU后端将该模型移植到浏览器中运行。最终成功制作出demo(地址simonw.github.io/moebius-web/),用户可上传图片、涂抹区域并一键修复。整个过程仅用数小时,且与Datasette项目并行开发。
技巧MoebiusClaude CodeWebGPU

推荐理由:Simon用Claude Code把0.2B参数的Moebius图像修复模型跑在浏览器里,无需显卡就能涂掉图片里的东西自动补全,挺酷的。
原文
5月20日
09:26
09:26andrew chen@andrewchen
风险投资人Andrew Chen提出,未来相当比例的LLM查询可能通过本地AI模型在浏览器中运行WebGPU完成,无需发送到云端前沿模型。驱动因素包括:大量查询简单如谷歌搜索,本地模型质量快速提升,苹果等消费硬件已能流畅运行Qwen 3.6 35b MoE等模型,隐私需求(健康、金融等),以及浏览器WebGPU免安装、降低计算成本的优势。尽管云端算力持续增长、token成本下降,但本地推理的便利性和隐私性可能催生新的需求。
AI产品本地AIWebGPU浏览器推理

推荐理由:本地AI推理正在从概念走向实用,做浏览器应用或关注隐私的开发者值得关注WebGPU的潜力,它可能改变LLM的使用模式。
原文
精选全部日报登录