追踪 OpenAI 应用程序 - 以编程方式使用文档

返回 LangChain 学习地图中文镜像固定版本 492a3713 | LangChain 官方文档 | MIT License

以编程方式使用文档

代理开发生命周期

Home

Build

Python

Overview

深度代理

Deep Agents 概述

开始使用

快速入门自定义 Deep Agents 与 Claude Agent SDK 对比变更日志

Deployment

托管深度代理投入生产

核心能力

模型工具 Deep Agents 中的上下文工程多模态输入和输出后端子代理异步子代理 Human-in-the-loop 权限内存技能沙盒

Interpreters

解释器动态子代理配置文件事件流流式传输评分标准

Frontend

Patterns

子代理流式传输待办事项列表沙箱

Protocols

Agent 客户端协议 (ACP) 模型上下文协议 A2A 服务器

深度代理代码

Deep Agents Code 记忆与技能使用远程沙箱在 Deep Agents Code 中使用子代理模型提供商配置 MCP 工具数据位置

LangChain

LangChain 概述

开始使用

安装 LangChain 快速入门变更日志理念

核心组件

智能体模型消息工具短期记忆事件流流式处理结构化输出

Middleware

概述预构建中间件自定义中间件

Frontend

Patterns

Markdown 消息工具调用无头工具 Human-in-the-Loop 分支对话推理令牌结构化输出消息队列加入和重新加入流时间旅行生成式 UI

Integrations

概览 CopilotKit AI 组件 assistant-ui OpenUI

高级用法

护栏运行时代理中的上下文工程模型上下文协议 (MCP) Human-in-the-loop

Multi-agent

Multi-agent 子代理交接技能路由器自定义工作流检索长期记忆

代理开发

LangSmith Studio

Test

测试单元测试集成测试 Agent 评估智能体聊天界面

Production

部署 LangSmith 可观测性

LangGraph

LangGraph 概述

开始使用

安装 LangGraph 快速入门运行本地服务器变更日志 LangGraph 思维工作流与智能体

Capabilities

持久化检查点器存储容错事件流流式输出中断使用时间旅行记忆子图

Production

应用结构测试向后兼容性 LangSmith Studio 智能体聊天界面部署 LangSmith 可观测性

Frontend

概述图执行自定义流通道

LangGraph API

图 API

在 Graph API 和 Functional API 之间选择 Graph API 概述使用图 API

函数式 API

函数式 API 概述使用函数式 API LangGraph 运行时 Studio

Integrations

LangChain Python 集成所有 LangChain Python 集成提供商

热门提供商

OpenAI 集成 Anthropic (Claude) 集成 Google 集成 AWS (Amazon) 集成 NVIDIA Hugging Face 集成 Microsoft 集成 Ollama 集成 Groq 集成 Fireworks 集成

按组件集成

聊天模型集成工具集成中间件集成沙箱集成后端集成检查点集成检索器集成文本分割器集成嵌入模型集成向量存储集成文档加载器集成

Learn

Tutorials

深度代理

构建数据分析代理构建深度研究智能体构建内容构建智能体

LangChain

从头构建一个数据分析智能体使用 LangChain 构建语义搜索引擎使用 LangChain 构建 RAG 代理构建 SQL 代理使用 LangChain 构建语音代理

Multi-agent

使用子代理构建个人助理使用交接构建客户支持使用路由构建多源知识库构建按需加载技能的 SQL 助手

LangGraph

使用 LangGraph 构建自定义 RAG 智能体构建自定义 SQL agent

概念概述

框架、运行时和测试工具提供者和模型组件架构内存概述上下文概述

更多资源

LangChain 学院案例研究获取帮助

Reference

Reference

深度代理 LangChain SDK LangGraph SDK 集成错误

Releases

版本控制更新日志

Releases

LangChain v1 新功能 LangGraph v1 新特性

迁移指南

LangChain v1 迁移指南 LangGraph v1 迁移指南从 langgraph-supervisor 迁移

Policies

发布策略安全策略

Contribute

Contribute

为文档做贡献贡献代码

Integrations

贡献集成实现 LangChain 集成使用标准测试发布集成 Co-marketing

TypeScript

Overview

深度代理

Deep Agents 概述

开始使用

快速入门自定义 Deep Agents 与 Claude Agent SDK 对比更新日志

Deployment

核心能力

模型工具 Deep Agents 中的上下文工程多模态输入和输出后端子代理异步子代理 Human-in-the-loop 权限内存技能沙盒

Interpreters

解释器动态子代理配置文件事件流流式传输

Frontend

Patterns

子代理流式传输待办事项列表沙箱

Protocols

Agent 客户端协议 (ACP) 模型上下文协议 A2A 服务器

深度代理代码

Deep Agents Code 记忆与技能使用远程沙箱在 Deep Agents Code 中使用子代理模型提供商配置 MCP 工具数据位置

LangChain

LangChain 概述

开始使用

安装 LangChain 快速入门更新日志理念

核心组件

智能体模型消息工具短期记忆事件流流式处理结构化输出

Middleware

概述预构建中间件自定义中间件

Frontend

Patterns

Markdown 消息工具调用无头工具 Human-in-the-Loop 分支对话推理令牌结构化输出消息队列加入和重新加入流时间旅行生成式 UI

Integrations

概览 CopilotKit AI 组件 assistant-ui OpenUI

高级用法

护栏运行时代理中的上下文工程模型上下文协议 (MCP) Human-in-the-loop

Multi-agent

Multi-agent 子代理交接技能路由器自定义工作流检索长期记忆

代理开发

LangSmith Studio

Test

测试单元测试集成测试 Agent 评估智能体聊天界面

Production

部署 LangSmith 可观测性

LangGraph

LangGraph 概述

开始使用

安装 LangGraph 快速入门运行本地服务器更新日志 LangGraph 思维工作流与智能体

Capabilities

持久化容错检查点器存储事件流流式输出中断使用时间旅行记忆子图

Production

应用结构测试向后兼容性 LangSmith Studio 智能体聊天界面部署 LangSmith 可观测性

Frontend

概述图执行自定义流通道

LangGraph API

图 API

在 Graph API 和 Functional API 之间选择 Graph API 概述使用图 API

函数式 API

函数式 API 概述使用函数式 API LangGraph 运行时 Studio

Integrations

LangChain JavaScript 集成所有 LangChain JavaScript 集成提供商

热门提供商

OpenAI

OpenAI 集成 ChatOpenAI 集成 OpenAIEmbeddings 集成 OpenAI 集成

Anthropic

Anthropic 集成 ChatAnthropic 集成 Anthropic 集成

Google

Google 集成 ChatGoogle 集成 Google 集成 ChatGoogleGenerativeAI 集成 ChatVertexAI 集成

AWS

AWS 集成 ChatBedrockConverse 集成 BedrockEmbeddings 集成

Microsoft

Microsoft 集成 AzureChatOpenAI 集成 AzureOpenAIEmbeddings 集成

通用集成

聊天模型集成工具集成 LLM 集成中间件集成沙盒集成后端集成商店集成文档转换器集成缓存集成

RAG 集成

检索器集成文本分割器集成嵌入模型集成向量存储集成文档加载器集成

Learn

Tutorials

深度代理

构建深度研究智能体构建内容构建智能体

LangChain

使用 LangChain 构建语义搜索引擎使用 LangChain 构建 RAG 代理构建 SQL 代理使用 LangChain 构建语音代理

Multi-agent

使用子代理构建个人助理使用交接构建客户支持使用路由构建多源知识库构建按需加载技能的 SQL 助手

LangGraph

使用 LangGraph 构建自定义 RAG 智能体

概念概述

框架、运行时和测试工具提供者和模型组件架构内存概述上下文概述

LangChain 学院

LangChain 学院

更多资源

案例研究获取帮助

Reference

Reference

深度代理 LangChain SDK LangGraph SDK 集成错误

Releases

版本控制更新日志

Releases

LangChain v1 新功能 LangGraph v1 新增功能

迁移指南

LangChain v1 迁移指南 LangGraph v1 迁移指南

Policies

发布策略安全策略

Contribute

Contribute

为文档做贡献贡献代码

Integrations

贡献集成实现 LangChain 集成使用标准测试发布集成 Co-marketing

Test

Overview

Evaluation

LangSmith 评估 LangSmith 引擎评估快速入门评估概念特定应用评估方法 LangSmith 聊天

Datasets

创建数据集

在 UI 中创建和管理数据集如何以编程方式创建和管理数据集管理数据集自定义输出渲染

设置评估

运行评估

如何评估 LLM 应用程序如何使用 OpenTelemetry 进行评估从 Playground 运行评估如何使用 REST API

评估类型

UI

如何定义 LLM-as-a-judge 评估器如何定义代码评估器如何创建复合评估器

SDK

如何定义 LLM-as-a-judge 评估器如何定义代码评估器如何创建组合评估器如何定义摘要评估器如何运行配对评估管理评估器

框架与集成

使用 openevals 包运行评估如何使用 pytest 运行评估 How to run evaluations with Vitest/Jest Harbor 集成

评估技术

定义评估目标

如何定义目标函数进行评估如何评估应用程序的中间步骤如何评估可运行对象如何评估图如何模拟多轮交互如何使用轨迹评估来评估你的智能体

评分方法

如何在一个评估器中返回多个分数如何返回分类指标与数值指标

实验配置

实验配置如何异步运行评估如何使用重复进行评估如何处理模型速率限制自动对实验运行评估器如何向现有实验添加评估器（仅限 Python）如何在本地运行评估（仅 Python）如何在本地读取实验结果如何在实验（仅限 Python）中重试失败的运行

多模态评估

运行多模态内容评估

改进评估器

利用人类反馈改进 LLM 评判评估器如何使用少样本示例改进您的评估器

Tutorials

评估聊天机器人评估 RAG 应用 Test a ReAct agent with Pytest/Vitest and LangSmith 评估复杂代理在新版本代理上运行回测

分析实验结果

分析实验如何比较实验结果如何在UI中过滤实验如何获取实验的性能指标如何使用 REST API 上传在 LangSmith 外部运行的实验

标注与人工反馈

使用标注队列以编程方式管理反馈和标注队列使用断言设置反馈标准内联标注追踪和运行如何审核评估器分数

Feedback

使用 SDK 记录用户反馈使用预签名 URL 收集反馈

常见数据类型

示例数据格式数据集预构建 JSON Schema 类型数据集转换

提示工程

提示词工程提示工程快速入门提示工程概念 LangSmith 聊天模型提供商

创建和更新提示词

创建提示词管理提示词以编程方式管理提示词提示词模板格式指南配置提示词设置在提示词中使用工具在提示中包含多模态内容使用 AI 编写提示词

连接到模型

Connect to an OpenAI compliant model provider/proxy 连接到自定义模型

Tutorials

优化分类器如何将提示词与 GitHub 同步测试多轮对话

上下文中心

上下文中心上下文工程概念使用 Context Hub 使用 SDK 管理上下文

Studio

LangSmith Studio 开始使用 Studio 如何使用 Studio Studio 中的可观测性 Studio 故障排除

Deploy

开始使用

LangSmith 部署

Quickstarts

将应用部署到云端部署托管深度代理

开发与测试

本地开发与测试工作室

Frameworks

部署 Google ADK 智能体部署其他框架

框架和平台

使用框架和平台部署使用 LangSmith 和 Vite 进行部署使用 Next.js 部署使用 SvelteKit 部署使用 Nuxt 部署使用 Cloudflare Workers 部署使用 Deno Deploy 部署

开发代理

开发智能体

开发您的应用

设置依赖项

如何使用 requirements.txt 设置应用程序如何使用 pyproject.toml 设置应用程序如何设置 JavaScript 应用程序如何自定义 Dockerfile Monorepo 支持

Persistence

配置检查点后端如何为应用添加 TTL 如何为代理部署添加语义搜索

与您的部署集成

如何使用 RemoteGraph 与部署交互在运行时重建图

代理服务器

代理服务器

部署组件

LangSmith 部署组件 LangSmith 数据平面 LangSmith 控制平面

Assistants

助手管理助手使用线程

Runs

运行如何启动后台运行如何在同一线程上运行多个代理无状态运行如何取消运行使用定时任务

核心能力

核心能力概览流式 API 使用服务器 API 的人机交互使用服务器 API 进行时间旅行 Agent Server 中的 MCP 端点 Agent Server 中的 A2A 端点通过 Agent Server 进行分布式追踪使用 Webhook

Double-texting

双重发送中断并发并发回滚拒绝并发并发入队

Tutorials

如何收集 Agent Server 运行的用户反馈如何使用 LangGraph 实现生成式用户界面 Implement a CI/CD pipeline using LangSmith Deployment and Evaluation

认证与访问控制

身份验证与访问控制添加自定义身份验证

自定义认证教程

设置自定义身份验证使对话私密隔离每个用户的存储数据连接身份验证提供商在 OpenAPI 中记录 API 身份验证设置 Agent 身份验证

服务器定制

使用服务端缓存添加静态加密

替换内置后端

如何使用自定义存储如何使用自定义检查点保存器

扩展 HTTP 服务器

如何添加自定义路由如何添加自定义中间件如何添加自定义生命周期事件

请求头和日志

使用 HTTP 头进行运行时配置在服务器日志中包含 HTTP 头

部署到云端

部署到云端云端部署云平台功能

托管深度代理

托管式深度智能体托管深度智能体快速入门将 MCP 工具连接到托管深度代理部署托管深度代理运行托管深度代理托管深度代理 SDK 托管深度代理 CLI 参考托管式深度代理 API 参考

Reference

云端 Agent Server 环境变量

部署到自托管

部署到自托管使用控制平面部署混合自托管独立服务器

Configure

自托管平台功能配置 Agent Server 以进行扩展自托管部署故障排除

Reference

自托管代理服务器环境变量

Sandboxes

LangSmith 沙盒沙盒快照沙盒服务 URL 沙箱认证代理沙盒挂载沙盒访问权限 Sandbox CLI 沙箱 SDK 使用使用 Harbor 运行评估

Reference

Reference

LangGraph Python SDK LangGraph JS/TS SDK LangSmith 部署 SDK LangGraph CLI RemoteGraph

代理服务器 API

LangSmith 部署的 Agent Server API 参考

控制平面 API

LangSmith Deployment 控制平面 API 参考

托管深度代理 API

托管深度代理 API 参考 Agent Server 更新日志

Monitor

Overview

LangSmith 可观测性

Engine

LangSmith Engine 使用 LangSmith Engine 查找并修复智能体的故障 LangSmith Engine Webhook 事件自托管上的 LangSmith Engine

Trace

追踪快速入门追踪 LLM 应用程序教程可观测性概念 LangSmith 聊天

追踪设置

Integrations

LLM 提供商

追踪 Anthropic 应用追踪 Amazon Bedrock 应用程序追踪 DeepSeek 应用追踪 Google Gemini 应用程序 Trace LangChain applications (Python and JS/TS) 追踪 LiteLLM 应用追踪 Mistral 应用程序追踪 OpenAI 应用程序追踪 OpenAI 兼容的提供商

代理框架

追踪 AutoGen 应用程序追踪 Claude Agent SDK 应用程序追踪 CrewAI 应用追踪 Deep Agents 应用程序追踪 Google ADK 应用追踪 LangGraph 应用追踪 Mastra 应用程序追踪 Microsoft Agent Framework 应用程序追踪 OpenAI Agents SDK 应用使用 OpenTelemetry 进行追踪追踪 PydanticAI 应用追踪 Semantic Kernel 应用追踪 Strands Agents 应用程序 Trace Vercel AI SDK applications (JS/TS only)

语音 AI 框架

语音追踪基础追踪 OpenAI Realtime 应用追踪 Gemini Live 应用程序追踪 LiveKit 应用追踪 Pipecat 应用

开发者工具

追踪 Claude Code 应用追踪 OpenAI Codex 会话跟踪 OpenCode 会话追踪 Pi 编码代理会话追踪 Instructor 应用追踪 n8n 工作流使用 Temporal 进行追踪追踪 Visual Studio Code Copilot Chat 会话

手动插桩

自定义插桩使用 API 进行追踪记录 LLM 调用记录检索器追踪元数据参数参考上传带追踪的文件

配置与故障排除

项目和环境设置

将追踪日志记录到特定项目无需设置环境变量即可追踪条件追踪设置追踪的采样率成本追踪使用与计费

高级追踪技术

实现分布式追踪在追踪函数中访问当前运行（span）在无服务器环境中追踪 JS 函数记录多模态追踪追踪生成器函数

数据与隐私

为追踪添加元数据和标签防止在追踪中记录敏感数据使用 OpenTelemetry 网关架构脱敏敏感数据

故障排除指南

排查追踪嵌套问题排查变量缓存问题

Reference

LangSmith 参考 LangSmith Python SDK LangSmith JS/TS SDK LangSmith Go SDK LangSmith Java SDK

API 参考

LangSmith API 参考

Debug

查看和管理追踪

查看跟踪筛选追踪配置运行输入和输出预览管理跟踪使用 SDK 查询追踪追踪查询语法使用 SDK 查询线程 LangSmith 远程 MCP LangSmith MCP 服务器配置线程

批量导出追踪数据

批量导出追踪数据管理批量导出目标监控和排查批量导出导入导出的数据将追踪数据导出到 BigQuery

消息视图

消息视图集成消息视图追踪格式参考

数据类型参考

运行 (span) 数据格式反馈数据格式

Observe

监控与告警

使用仪表板监控项目 LangSmith 中的告警通过 Insights 发现错误和使用模式

在线评估器

设置 LLM 即评判者在线评估器设置多轮在线评估器设置在线代码评估器设置复合在线评估器

Automations

设置自动化规则为规则配置 Webhook 通知

PLATFORM

无代码代理

使用 LangSmith Fleet 的无代码智能体

开始使用

快速入门基础知识模板智能体平台对比

Configure

管理工作区管理代理身份管理代理设置计算机使用

工具和自动化

工具集成渠道定时任务技能将 Slack 与智能体集成将 Teams 与智能体集成远程 MCP 服务器 Arcade 集成 Salesforce 集成

Advanced

在代码中使用 Fleet 代理 LangSmith 工具服务器 Fleet Webhook 支持认证的工具响应

更多资源

访问与监督 Self-hosted LangSmith Fleet 变更日志

Govern

Account

账户创建账户和 API 密钥配置文件集成定价方案 LangSmith 企业版

Organization

工作区设置

设置层级结构工作负载隔离设置资源标签管理模型配置

计费与使用

在您的账户中管理账单查看使用量精细计费用量使用 API 管理您的组织使用 Terraform 管理 LangSmith

用户与访问控制

用户管理基于角色的访问控制基于属性的访问控制组织和workspace操作参考身份验证方法在 SSO 组织中管理用户访问

Tools

LangSmith 聊天 LangSmith CLI LangSmith 技能

更多资源

FAQ

常见问题区域常见问题 LangSmith 状态

平台设置

平台设置

设置 LangSmith 云 (SaaS)

Self-hosted

自托管 LangSmith

按云提供商开始使用

AWS 上的自托管 LangSmith Azure 上的自托管 LangSmith 在 GCP 上自托管 LangSmith

设置指南

自托管依赖项的最低版本在 Kubernetes 上自托管 LangSmith 启用 LangSmith 部署、Fleet、Insights 和 Chat

管理安装

与 LangSmith 的自托管实例进行交互升级安装自托管 LangSmith 的灾难恢复出站流量用于计费和运营遥测查看您组织中的追踪计数 LangSmith 托管的 ClickHouse 为安装创建 Ingress（Kubernetes） LangSmith 安装的镜像符合FIPS标准的镜像

Configuration

设置 LLM 身份验证代理在 Helm chart 中配置环境变量配置 LangSmith 以实现规模化启用 TTL 和数据保留使用环境变量配置模型提供商自定义错误支持消息故障排除

连接外部服务

启用 Blob 存储连接到外部 ClickHouse 数据库连接到外部 PostgreSQL 数据库连接到外部 Redis 或 Valkey 数据库

平台认证与访问控制

基础身份验证（邮箱和密码）使用 OAuth2.0 和 OIDC 设置 SSO 自定义用户管理配置自定义 TLS 证书使用现有密钥进行安装 (Kubernetes)

自托管可观测性

将 LangSmith 遥测数据导出到您的可观测性后端为 LangSmith 遥测配置您的收集器为您的 LangSmith 部署配置可观测性堆栈安装 Mission Control

Scripts

删除工作区删除组织删除轨迹生成 ClickHouse 统计信息生成查询统计针对 PostgreSQL 运行支持查询运行支持查询以针对 ClickHouse

Hybrid

设置指南（旧版）

Reference

LangSmith Cloud 更新日志自托管 LangSmith 更新日志发布策略发布阶段

政策与合规

LLM 网关

LLM 网关自定义模型提供商消费策略 PII 和敏感信息脱敏

审计与合规

数据与合规

LangSmith 共同责任模型数据存储与隐私合规性数据清除可扩展性和弹性

要追踪使用 OpenAI 兼容 API 的提供商，请参阅追踪 OpenAI 兼容的提供商.

提示

Connect these docs to Claude, VSCode, and more via MCP for real-time answers.

提示

Edit this page on GitHub or file an issue.