11:51Guillermo Rauch@rauchg精选Agent调试困难,因为AI模型行为非确定,且Agent是复杂分布式系统,涉及多个步骤、函数、沙箱及数十个API服务。Vercel团队为eve.dev内置可观测性,支持检查模型调用、工具调用、运行时错误及token用量,已获用户好评。AI产品Verceleve智能体可观测性调试推荐理由:Vercel给eve.dev加了agent调试跟踪,能看模型调用、错误和token,开发者福音。原文
02:24elvis@omarsar0Latitude是一个开源(MIT许可)的Agent可观测性工具。将Latitude指向Claude Code设置后,可实时查看token预算消耗情况。它能展示Agent的完整行为,捕获重复失败的任务,并显示频率和原因。用户无需离开编辑器即可直接修复这些问题。AI产品LatitudeClaude Code智能体可观测性推荐理由:Claude Code吃token太猛?Latitude实时监控还能捉住重复失败的bug,免费开源,省心省钱!原文
04:25AI Engineer@aiDotEngineerAI Engineer World's Fair 将于2025年6月29日至7月2日在旧金山Moscone West举办。60多家金牌赞助商已确认参展,覆盖基础设施、推理、智能体、数据、评估和可观测性等六大领域。活动旨在展示完整的AI工程生态栈,从底层基础到上层应用。行业AI EngineerMoscone West智能体基础设施可观测性推荐理由:AI工程师的年度盛会,60多个顶级赞助商齐聚一堂,覆盖从底层硬件到上层Agent的完整栈,值得去现场看看趋势。原文
03:43LangChain@LangChainAILangSmith 新增代理拆解功能,可让开发者追踪 AI 代理在生产环境中的每一步决策。该功能帮助快速定位失败原因,并识别关键改进点。无需修改代码即可解析代理行为逻辑,实现持续优化。AI产品LangSmithLangChain智能体可观测性生产环境推荐理由:LangSmith 新功能让你像拆玩具一样拆解 AI 代理,哪步走错了门清,生产环境调试超省心。原文
14:11Harrison Chase@hwchase17精选开发者 Saurabh 强调,Agent 必须有可观测性。他用 LangGraph 做编排,LangSmith 做追踪、评估和回归测试。如果无法解释 Agent 为何给出某个回答,那就只是 demo 而非架构。他建议通过 tracing 捕获 prompt 和工具调用的全部上下文。技巧LangGraphLangSmithAgent可观测性智能体推荐理由:如果你在用 LangGraph 做 agent,这招能帮你从 demo 变成可交付的系统——关键是 LangSmith 的 trace 和 eval。原文
04:40LangChain@LangChainAILangChain 推出 LangSmith Observability 功能,旨在帮助开发者实时监控和理解智能体(agent)的运行表现。该工具能够快速定位问题根源,提升调试效率。对于使用 LangChain 构建复杂智能体应用的团队来说,这解决了追踪和诊断性能瓶颈的痛点。目前该功能已可用,相关推文获得初步关注。AI产品智能体可观测性LangChain调试工具实时监控推荐理由:做智能体应用的开发者终于不用靠猜来排查问题了——LangSmith Observability 让实时性能追踪变得直观,建议用 LangChain 的团队直接试试。原文
05:33LangChain@LangChainAILangChain 发布了 LLM Gateway,将可观测性与执行控制功能整合到 LangSmith 平台中。此前,开发者需要分别使用独立的网关、护栏平台和可观测性堆栈,并在出现问题时手动关联三者的信号。LLM Gateway 解决了这一痛点,提供了统一的入口来监控和强制执行 LLM 调用策略。对于使用 LangSmith 的团队,这意味着更简单的架构和更快的故障排查。AI产品LangChainLLM Gateway可观测性执行控制LangSmith推荐理由:做 LLM 应用开发的团队终于不用在网关、护栏和可观测性之间来回切换了——LangSmith 用户可以直接在平台内完成监控和策略执行,建议点开看看具体怎么整合。原文
03:44LangChain@LangChainAILangChain 宣布正在构建 SmithDB,旨在解决智能体可观测性带来的系统性问题。SmithDB 专注于处理智能体运行时的数据追踪、调试和监控需求,为开发者提供更可靠的底层基础设施。该项目目前处于早期阶段,LangChain 正在招聘相关工程师。对于构建复杂智能体系统的团队来说,SmithDB 有望填补智能体可观测性领域的空白。AI产品智能体可观测性LangChainSmithDB基础设施推荐理由:智能体可观测性是当前 AI 工程化的核心痛点,做智能体应用开发的团队值得关注——SmithDB 可能解决你调试和监控智能体行为的头疼问题。原文
22:44LangChain@LangChainAILangChain 分享了一个真实案例:一个编码代理在夜间陷入重试循环,到早上已调用 LLM 达 10,000 次,产生四位数的账单。问题在于,可观测性只能事后告诉你发生了什么,而无法在事前阻止。要避免此类问题,需要在请求层强制执行策略,例如限制重试次数或设置调用上限。这提醒开发者,构建可靠 AI 代理时,策略控制比事后监控更重要。行业编码代理成本控制LLM调用可观测性策略执行推荐理由:做 AI 代理开发的团队都会遇到这类成本失控风险,LangChain 这个案例直接点出了「事后监控 vs 事前策略」的痛点,建议在部署前就加上请求层限制。原文
06:44Augment Code@augmentcodeAugment 推出了名为 Cosmos 的新平台,旨在帮助企业大规模部署 AI 智能体。Cosmos 支持在用户自己的环境或 Augment 的环境中运行,并允许用户选择自己喜欢的模型。该平台提供了可观测性、审计追踪和人工监督功能,以满足企业级部署对安全性和合规性的要求。这对于希望将 AI 智能体投入生产环境的团队来说是一个重要的基础设施选择。AI产品智能体部署平台Augment可观测性企业级推荐理由:做 AI 智能体工程化的团队终于有了一个兼顾灵活性和合规性的部署方案——Cosmos 支持自选模型和完整审计,适合需要将智能体落地到生产环境的企业开发者直接评估。原文
21:11Harrison Chase@hwchase17LangSmith 宣布推出三项新功能:沙盒(Sandbox)、网关(Gateway)和可观测性(Observability)。沙盒提供安全的测试环境,网关作为模型路由层,可观测性则用于监控和调试 LLM 应用。这些功能旨在完善 AI 代理平台的必备能力,帮助开发者更高效地构建和部署 LLM 应用。LangSmith 是 LangChain 旗下的 LLM 应用开发与监控平台,此次更新进一步强化了其作为全栈工具的地位。AI产品LangSmith沙盒网关可观测性LLM 应用开发推荐理由:LangSmith 补齐了代理平台的关键拼图,做 LLM 应用开发的团队可以直接用沙盒测试、网关路由、可观测性监控,省去自己搭基础设施的麻烦。原文
00:49Y Combinator@ycombinatorSazabi 是一款专为快速迭代的 AI 原生工程团队打造的新一代可观测性平台。它旨在替代 Datadog、Sentry、Grafana 或 Axiom 等传统工具,声称能让团队效率提升 10 倍。该平台由 Y Combinator 支持,创始人 @shcallaway 宣布正式上线。对于正在寻找更高效监控方案的 AI 团队来说,这是一个值得关注的新选择。AI产品可观测性AI 原生工程SazabiYC 创业监控平台推荐理由:Sazabi 瞄准了 AI 原生团队的可观测性痛点,声称比现有方案快 10 倍,正在用 Datadog 或 Grafana 的团队值得关注这个 YC 新秀。原文
10:06LangChain@LangChainAILangSmith Engine 正式发布,用户可通过三个简单步骤快速上手:连接追踪项目、可选连接代码仓库、审查并合并改进。该引擎旨在提供主动式智能体工程师体验,帮助开发者更高效地管理和优化 AI 应用。LangSmith 是 LangChain 推出的可观测性平台,此次更新进一步降低了使用门槛。AI产品LangSmith可观测性追踪LangChain智能体推荐理由:做 AI 应用开发的团队终于有了更丝滑的追踪工具——三步就能接入,省去繁琐配置,建议用 LangChain 的开发者直接试。原文
08:06Notion@NotionHQNotion 发布了 Custom Agent Insights 功能,让用户能够实时查看智能体的每一次运行过程。该功能旨在解决智能体行为不透明的问题,提供完整的运行日志和可视化。目前该功能正在逐步推出,用户无需再猜测智能体在做什么。AI产品Notion智能体可观测性自动化产品更新2 个信源在谈推荐理由:Notion 用户终于能看清智能体每一步操作了,做自动化工作流的团队可以直接用起来,减少调试时的盲猜。原文
07:59LangChain@LangChainAI精选LangChain 应用 AI 工程师 Palash Shah 在 X 上分享了 LangSmith Engine 的技术细节,深入讲解了其内部架构和工作原理。LangSmith Engine 是 LangChain 平台的核心组件,用于追踪、评估和优化 LLM 应用。这次分享帮助开发者理解如何更高效地使用 LangSmith 进行 AI 应用的可观测性和调试。对于使用 LangChain 构建生产级 AI 应用的团队来说,这是了解平台底层机制的好机会。AI产品LangChainLangSmith Engine可观测性LLM 应用调试推荐理由:LangSmith Engine 是 LangChain 生态的调试和监控核心,做 LLM 应用生产的开发者值得了解其内部机制,能帮你更精准地定位问题。原文
23:42Ate-a-Pi@svpino开发者Santiago Valdarrama分享了一种极简方法,只需引入一个库并添加一行代码,即可为基于LLM的应用开启完整的可观测性和自动分析功能。该方法能免费获取大量关键信息,如请求延迟、Token消耗、错误率等,极大简化了调试和性能监控流程。对于构建和部署LLM应用的团队来说,这是一个无需思考的实用技巧。技巧LLM可观测性监控调试一行代码推荐理由:做LLM应用开发的团队,监控调试一直是个痛点——现在一行代码就能拿到全链路数据,省去自己搭监控的麻烦,建议直接试。原文
13:36LangChain@LangChainAI精选LangChain 发布了 SmithDB,一个专为智能体可观测性和评估工作负载构建的数据层。它支持在大量追踪数据上以低延迟执行复杂查询,并满足自托管和多云部署的需求。SmithDB 采用全新架构,解决了传统数据库在处理智能体系统时面临的性能与扩展性挑战。该产品旨在帮助开发者更高效地监控、调试和评估 AI 智能体的行为。AI产品智能体可观测性LangChain数据层评估推荐理由:做智能体开发和运维的团队终于有了专门的数据层——SmithDB 解决了大规模追踪数据下的查询延迟和自托管痛点,值得关注。原文
00:38LangChain@LangChainAI精选LangChain 发布 LangSmith 的新架构 SmithDB,由对象存储、Postgres 元存储和无状态三组件构成。核心体验性能最高提升 12 倍。新架构使自部署和多云环境配置更简便,解决代理开发中的可观测性瓶颈。AI产品LangSmithLangChain可观测性智能体性能优化推荐理由:LangSmith 性能快了 12 倍,部署更简单原文