AITP
精选全部 AI 动态AI 日报Agent 接入关于更新日志信源提报反馈
登录 / 注册
AITOP

模型监控

共 4 条相关 AI 资讯
7月8日
01:07
01:07官方一手AWS Machine Learning Blog@Sandeep Raveesh-Babu
精选
本文展示如何使用开源工具Evidently结合Amazon SageMaker AI生成监控报告。通过MLflow组织并比较不同时间点的监控结果,并可通过管道自动化触发漂移通知。该方法支持数据漂移和模型性能退化检测,帮助维持预测准确性。
技巧Amazon SageMaker AIMLflowEvidently模型监控数据漂移

推荐理由:AWS教你用Evidently+SageMaker+MLflow搭一套模型监控流水线,自动检测数据漂移并报警,实操性强。
原文
6月12日
02:10
02:10OpenRouter@OpenRouterAI
OpenRouter 发布了新的 Activity Explorer 功能,让用户和团队可以一目了然地查看每个模型的花费、Token 用量、缓存命中率、Agent 使用情况以及趋势变化。该功能包含一个 API,可以查询所有历史数据,并且所有数据实时更新。对于使用多个 AI 模型和 Agent 的团队来说,这是一个高效的成本和用量监控工具。
AI产品OpenRouterActivity Explorer模型监控成本管理API

推荐理由:OpenRouter 的 Activity Explorer 解决了多模型、多 Agent 场景下的成本与用量可视化痛点,做 AI 应用开发或管理团队模型预算的人可以直接用起来,省去手动统计的麻烦。
原文
01:12
01:12OpenRouter@OpenRouterAI
OpenRouter 发布了新的 Activity Explorer 功能,让用户能直观查看团队在各类模型上的花费、token 使用量、缓存命中率、智能体调用及趋势数据。该功能支持实时更新,并集成 API 以便查询历史数据。NousResearch 的 Hermes 模型被列为内部最常用的工具之一。这为管理多模型支出的团队提供了便捷的监控手段。
AI产品OpenRouterActivity Explorer模型监控费用管理智能体

推荐理由:OpenRouter 的 Activity Explorer 解决了多模型团队的费用监控痛点,做 AI 应用开发或模型调度的团队可以直接用起来,省去手动统计的麻烦。
原文
6月11日
03:16
03:16Y Combinator@ycombinator
Lattice Health 推出新服务,专门监控医院已部署的 X 光、CT、MRI 等医学影像 AI 模型的实时准确率。一旦模型性能出现下滑,系统会立即发出告警,帮助医院及时发现并修复问题。这解决了当前医疗 AI 部署后缺乏持续验证的痛点,确保患者诊断的可靠性。该服务由 Y Combinator 支持,刚刚正式发布。
AI产品医疗 AI模型监控影像诊断Lattice HealthY Combinator

推荐理由:医疗 AI 部署后准确率下降是行业盲区,Lattice Health 填补了这个缺口。做医疗 AI 部署或医院信息化的团队值得关注,能直接提升患者安全。
原文
精选全部日报登录