AI导航

LangSmith上线AI Search:用一句话按行为搜出智能体的异常轨迹

AI资讯
2 min read
2 次阅读

LangSmith 在 2026 年 10 月 13 日由 LangChain 官方博客宣布上线 AI Search 公测:开发者用一句自然语言描述想找的行为,比如哪次会话里智能体泄露了隐私信息、哪位用户明显受挫,系统就返回命中的智能体运行轨迹。它解决的是轨迹数据越攒越多、真正出问题的那几条却找不到的麻烦。

标签和全文检索为什么不够用

一条轨迹里装着用户输入、智能体的推理、工具调用和最终回复,信息量大且没有固定结构。团队平时想从轨迹里挖东西,无非是找评测数据集的样本,或者找典型会话给标注人员复核。但“智能体嘴上说做完了、实际没做”这类问题,对不上任何标签或元数据字段,全文搜索也搜不出来;过去只能提前布置专门的评估器,或者靠人一条条翻。AI Search 把入口换成行为描述,类似的用法还包括找想取消订阅的用户、提到竞品的对话、反馈了不支持的集成需求的会话。

做法是让小模型逐条读轨迹,而不是算向量

官方解释了为什么不用向量搜索:把整条轨迹压成一个向量会丢细节,真做完了和只说做完了的轨迹在向量空间里几乎一样,分辨它们必须让模型读原文。AI Search 背后是 LangSmith 的轨迹数据库 SmithDB,它先把来自 OpenAI、Anthropic 等各种 SDK 和框架的轨迹统一整理成“轨迹视图”,把每轮重复发送的对话历史去重,再给每条轨迹分配固定的 8K token 预算,优先放用户消息和智能体的正式回复,其余位置才给中间推理与工具结果。搜索时先用已有筛选条件缩小范围,再由快速决策模型并行逐条核对,命中结果流式返回,不用等全量扫完。

公测范围与官方承认的边界

AI Search 目前在 LangSmith Cloud 的 GCP 美国、欧洲和亚太区域公测,不额外收费,由组织管理员在设置里开启后出现在轨迹页面。LangChain 也写明了它的短板:用户是放弃了还是满意离开了这类只差一两轮对话的细微区别,模型仍容易判错;如果答案藏在工具返回结果里,现有预算分配可能恰好把它裁掉。团队正在研究按问题类型挑选上下文、让模型在不确定时二次读取更多内容,以及把命中结果自动分组汇总。对已经在生产环境跑智能体的团队,这项功能的价值要等实际命中精度验证之后才能定论,但方向很清楚:轨迹检索正在从按字段筛,转向按行为找。

推荐工具

NVIDIA Chat with RTX AI聊天 Chat with RTX 是 NVIDIA 面向 RTX 电脑的本地 AI 聊天工具,可围绕本地文档和视频资料做问答,适合重视隐私、离线检索并具备硬件条件的用户更适合资料不便上传云 HuggingChat AI聊天 HuggingChat 是 Hugging Face 的开源模型聊天应用,支持 Omni 自动选模型,也可手动选社区开放模型对话。它适合体验开源模型、技术探索和问答,结果可能不稳定,重要内容需复核。 纳米AI搜索 AI搜索 纳米AI 是 360 旗下 AI 搜索和智能体入口,支持文字、语音、拍照提问、多模型协作与内容创作,适合中文用户做日常搜索、学习问答、移动查询、热点追踪、生活决策、知识整理和轻量创作。 Qwen Chat(通义千问) AI聊天 Qwen Chat 是Qwen 大模型聊天助手,支持Qwen 模型聊天、写作和编程问答,适合中文用户和开发者完成 AI 对话、资料问答和任务协作,适合上线前核对权限、成本和资料质量。 DuckDuckGo AI Chat AI聊天 DuckDuckGo AI Chat 适合重视隐私的普通用户使用,围绕隐私 AI 聊天、免账户使用和多模型问答提供对话式 AI 支持和任务协作能力,适合上线前核对权限、成本和资料质量。 Goody-2 AI聊天 Goody-2 是以极端安全和伦理对齐为特色的 AI 聊天助手,常用于观察模型拒答边界、内容安全策略、保守输出体验和 AI 风险讨论,更适合作为安全边界样本使用前应理解它偏实验性质,不适合。