Latitude
面向LLM应用的开发与评估平台,提供AI Agent开发、测试和持续评估能力,旗下产品包括AgentScore
时间轴 (近 90 天)
Latitude把复发的失败聚类成跟踪问题,还能交给编码智能体开修复PR;没有LLM网关,更偏向工程师而非产品经理。
文章对比了12款AI智能体可观测性与评估工具,包括BotGauge、Braintrust、Confident AI、LangSmith、Langfuse、Arize Phoenix、Galileo、LangWatch、Pydantic Logfire、Latitude、Datadog LLM Observability、Fiddler。
Braintrust定价为免费起步,Pro版249美元/月;Confident AI免费起步,Starter版200美元/月;LangSmith免费起步,Plus版39美元/座/月;Langfuse免费,付费版29美元/月起;Arize Phoenix免费,云版50美元/月起;Galileo免费,Pro版100美元/月起;LangWatch免费,付费版29欧元/座/月起;Pydantic Logfire免费,Team版49美元/月起;Latitude免费,Pro版99美元/月;Datadog LLM Observability按用量计费;Fiddler为定制报价。
Latitude是一个面向LLM应用的开发与评估平台
AgentScore是由Latitude团队推出的,为生产环境中的AI Agent提供每日更新的质量评分的工具
使用AgentScore的方式是将生产环境中的Agent连接到Latitude平台,即可获得跨五个维度的质量评分
Latitude 的 AI Dungeon 是「整个世界观可玩」类产品的最早探索者,但体验更偏文字冒险而非关系养成
全部知识事实 (6)
文章对比了12款AI智能体可观测性与评估工具,包括BotGauge、Braintrust、Confident AI、LangSmith、Langfuse、Arize Phoenix、Galileo、LangWatch、Pydantic Logfire、Latitude、Datadog LLM Observability、Fiddler。
50%待验证Latitude把复发的失败聚类成跟踪问题,还能交给编码智能体开修复PR;没有LLM网关,更偏向工程师而非产品经理。
50%待验证使用AgentScore的方式是将生产环境中的Agent连接到Latitude平台,即可获得跨五个维度的质量评分
50%待验证Latitude是一个面向LLM应用的开发与评估平台
50%待验证Latitude 的 AI Dungeon 是「整个世界观可玩」类产品的最早探索者,但体验更偏文字冒险而非关系养成
50%待验证AgentScore是由Latitude团队推出的,为生产环境中的AI Agent提供每日更新的质量评分的工具
50%