LangSmith是由LangChain团队开发的LLM应用全生命周期管理平台，专为大语言模型应用的开发、调试与生产监控场景设计。平台提供链路追踪、日志记录、性能评估和数据集管理等核心功能，帮助开发者定位模型调用中的问题、评估输出质量并持续优化应用表现。LangSmith可与LangChain框架深度集成，同时也支持独立使用，适用于个人开发者和企业团队的LLM应用运维场景。
业界常用的AI产品评测工具包括LangSmith、Braintrust、Promptfoo等
LangSmith每月提供约1000次免费额度
LangChain在2023年推出了LangSmith（用于调试和监控）和LangServe（用于快速部署API服务）
业界已有LangSmith、Helicone、Arize等专门的LLM可观测性工具
LangChain生态包括核心库langchain-core、社区集成包langchain-community、可视化编排工具LangGraph和托管平台LangSmith
2024年LangChain进行了重大重构，拆分为langchain-core、langchain-community和langchain三个包，并推出了LangGraph和LangSmith
LangChain在2023年后推出了LangGraph和LangSmith
LangSmith 和 Braintrust 等平台允许开发者追踪每一轮代理决策的推理过程、Token 消耗和行为轨迹
LangSmith和Helicone是用于Agent多步推理过程日志追踪的工具
LangSmith是LangChain官方的追踪和评估平台
还有 17 条时间轴事件