Atla AI

HoneyHive 是一款面向使用 LLM 和 AI 智能体的开发人员的一体化 AI 可观测性与评估平台。它提供了一个统一的解决方案，用于构建、测试、调试和监控 AI 应用，涵盖从初步实验到企业级部署的全过程。该平台帮助团队系统地衡量 AI 质量，深入了解智能体交互，监控成本和延迟等性能指标，并协作管理提示词和数据集等关键资产，确保自信地交付可靠的 AI 产品。

LangWatch 是一个一体化的开源平台，用于监控、评估和优化 LLM 应用。它专注于通过模拟用户环境进行 AI 代理测试，帮助团队在生产前捕获回归和边缘案例。该平台结合了可观测性、评估、优化和护栏功能，以确保 AI 应用的可靠性、安全性和高性能。

Raygun 是一款先进的 Web 和移动应用监控平台，提供由 AI 驱动的错误解决方案、崩溃报告和性能监控。它帮助开发团队主动检测、诊断和解决问题，以提供无缝的软件体验并提高用户满意度。

Valyr (前身为 Helicone) 是一个开源的 LLM 可观测性平台和 AI 网关。它帮助开发者监控、调试和分析他们的 AI 应用，通过单一集成即可访问超过100种模型，管理成本，并通过缓存和速率限制等功能提高可靠性。

smallhours 是一个为开发者打造的AI平台，可实现全天候自动化根本原因分析（RCA）。它通过OpenTelemetry与您的技术栈集成，监控系统，利用您的代码库和运行手册作为上下文诊断问题，将解决时间加快10倍，从而最大限度地减少停机时间并简化值班职责。

HoneyHive 是一款面向使用 LLM 和 AI 智能体的开发人员的一体化 AI 可观测性与评估平台。它提供了一个统一的解决方案，用于构建、测试、调试和监控 AI 应用，涵盖从初步实验到企业级部署的全过程。该平台帮助团队系统地衡量 AI 质量，深入了解智能体交互，监控成本和延迟等性能指标，并协作管理提示词和数据集等关键资产，确保自信地交付可靠的 AI 产品。

Valyr (前身为 Helicone) 是一个开源的 LLM 可观测性平台和 AI 网关。它帮助开发者监控、调试和分析他们的 AI 应用，通过单一集成即可访问超过100种模型，管理成本，并通过缓存和速率限制等功能提高可靠性。

Pydantic 是一个面向开发者的综合平台，提供强大的数据验证、AI 开发工具和全栈可观测性解决方案。它通过利用类型提示进行运行时数据验证，并提供从本地开发到生产环境的深度洞察，从而在 Python 和其他语言中实现更快、更稳健的应用程序开发。

Helicone 是一个为开发者提供的开源平台，集成了 AI 网关和 LLM 可观测性功能。它通过提供路由、监控、调试和分析 LLM 使用情况的工具，帮助构建可靠的 AI 应用程序。主要功能包括支持100多种模型的统一 API、智能缓存、速率限制、提示词管理和详细的性能分析。

Metorial 是一个专为 AI 代理设计的集成平台，使开发者能够快速构建、部署和监控强大的代理式 AI 应用。它通过其无服务器模型上下文协议 (MCP) 平台，提供与数百种工具、数据源和 API 的无缝连接，为可扩展的 AI 解决方案提供强大的 SDK、可观测性和企业级安全性。

Parea AI 是一个用于开发、测试和监控 LLM（大语言模型）应用的一站式平台。它提供实验跟踪、可观测性、评估和人工标注工具，帮助团队自信地将 AI 系统投入生产。

smallhours 是一个为开发者打造的AI平台，可实现全天候自动化根本原因分析（RCA）。它通过OpenTelemetry与您的技术栈集成，监控系统，利用您的代码库和运行手册作为上下文诊断问题，将解决时间加快10倍，从而最大限度地减少停机时间并简化值班职责。

Langfuse 是一个开源的 LLM 工程平台，为调试、评估和改进 LLM 应用提供全面的工具。它提供追踪、提示词管理、评估框架和指标等功能，为使用大语言模型进行构建的团队简化整个开发生命周期。

Braintrust 是一个用于开发、评估和部署稳健的 LLM 应用程序的端到端平台。它为提示词工程、模型评估、实时追踪和生产监控提供了一套全面的工具。Braintrust 专为技术和非技术团队成员设计，有助于简化 AI 开发生命周期，确保 AI 产品可靠、有效并为生产做好准备。

Blaxel 是一个专为 AI 开发者设计的无服务器计算平台，提供高效构建、部署和扩展 AI 代理应用所需的基础设施和工具。它提供沙盒化虚拟机、统一的 LLM 网关和深度可观测性。

Latitude 是一个开源开发平台，专为构建、评估和部署由大型语言模型（LLM）驱动的应用程序而设计，尤其侧重于创建自主 AI 代理。它为开发者提供了一套全面的工具，用于实验、优化和扩展他们的 AI 解决方案。

Digma 是一个代理式 AI SRE 平台，它使用动态代码分析（DCA）在代码和基础设施问题进入生产环境之前，自主识别、分析和修复这些问题。它与您的可观测性堆栈集成，提供实时洞察，防止破坏性变更，并优化应用性能，从而显著缩短解决时间并减少工程投入。

OpenLIT 是一个专为生成式 AI 和 LLM 应用设计的开源、OpenTelemetry 原生可观测性平台。它通过请求追踪、成本跟踪、异常监控和性能分析等工具简化了开发流程。OpenLIT 拥有集中的提示词仓库、用于存储密钥的安全保管库以及用于比较 LLM 的实验场，为高效监控和扩展 AI 应用提供了全面的解决方案。

Metoro 是一个专为 Kubernetes 设计的 AI 驱动的可观测性平台。它利用 eBPF 技术实现零侵入式监控，能够自主检测问题、分析根本原因，并通过拉取请求自动生成代码修复。一分钟内即可投入使用，为传统监控工具提供了一个全面且经济高效的替代方案。