Langtrace

Langfuse 是一个开源的 LLM 工程平台，为调试、评估和改进 LLM 应用提供全面的工具。它提供追踪、提示词管理、评估框架和指标等功能，为使用大语言模型进行构建的团队简化整个开发生命周期。

HoneyHive 是一款面向使用 LLM 和 AI 智能体的开发人员的一体化 AI 可观测性与评估平台。它提供了一个统一的解决方案，用于构建、测试、调试和监控 AI 应用，涵盖从初步实验到企业级部署的全过程。该平台帮助团队系统地衡量 AI 质量，深入了解智能体交互，监控成本和延迟等性能指标，并协作管理提示词和数据集等关键资产，确保自信地交付可靠的 AI 产品。

Laminar 是一个专为构建可靠 AI 应用的开发者设计的开源可观测性与评估平台。它提供全面的工具用于追踪、评估和调试由 LLM 驱动的系统。核心功能包括实时追踪、浏览器代理可观测性、交互式实验场和集成的数据集管理，从而简化从开发到生产的整个 MLOps 生命周期。

PostHog 是一个面向开发人员的一体化开源产品分析平台。它将产品分析、会话回放、功能标志和 A/B 测试整合到单一工具中，无需使用分散的数据堆栈。它旨在帮助团队了解用户行为，更快地构建更好的产品。

OpenReplay 是一款可自托管的开源会话重放和产品分析套件。它使团队能够理解用户行为、更快地复现错误并优化数字体验。通过提供可视化上下文以及控制台日志和网络活动等技术数据，OpenReplay 帮助工程师、产品经理和支持团队识别用户痛点、改善转化漏斗，并在完全控制客户数据的同时提升整体产品可用性。

Langfuse 是一个开源的 LLM 工程平台，为调试、评估和改进 LLM 应用提供全面的工具。它提供追踪、提示词管理、评估框架和指标等功能，为使用大语言模型进行构建的团队简化整个开发生命周期。

Ragas 是一个用于评估和测试检索增强生成（RAG）流程的开源 Python 框架。它提供了一套度量标准来衡量 LLM 应用的性能，从上下文检索到答案生成。Ragas 受到 LangChain 和 LlamaIndex 等行业领导者的信赖，通过识别和减轻幻觉、不相关响应等问题，帮助开发者构建更健壮、可靠和准确的 AI 系统。

Helicone 是一个为开发者提供的开源平台，集成了 AI 网关和 LLM 可观测性功能。它通过提供路由、监控、调试和分析 LLM 使用情况的工具，帮助构建可靠的 AI 应用程序。主要功能包括支持100多种模型的统一 API、智能缓存、速率限制、提示词管理和详细的性能分析。

Agenta 是一个开源的 LLMOps 平台，专为团队构建可靠的 LLM 应用程序而设计。它将提示管理、系统性评估和可观测性集成到单一的协作工作流中，帮助开发人员、产品经理和领域专家从分散的流程转向结构化的开发模式。

HoneyHive 是一款面向使用 LLM 和 AI 智能体的开发人员的一体化 AI 可观测性与评估平台。它提供了一个统一的解决方案，用于构建、测试、调试和监控 AI 应用，涵盖从初步实验到企业级部署的全过程。该平台帮助团队系统地衡量 AI 质量，深入了解智能体交互，监控成本和延迟等性能指标，并协作管理提示词和数据集等关键资产，确保自信地交付可靠的 AI 产品。

Laminar 是一个专为构建可靠 AI 应用的开发者设计的开源可观测性与评估平台。它提供全面的工具用于追踪、评估和调试由 LLM 驱动的系统。核心功能包括实时追踪、浏览器代理可观测性、交互式实验场和集成的数据集管理，从而简化从开发到生产的整个 MLOps 生命周期。

Zed是一款用Rust从头构建的高性能、协作式、AI驱动的代码编辑器。它为速度和效率而设计，提供实时协作、与LLM深度集成以实现代理式编辑，以及包括调试器和原生Git支持在内的全套内置工具。Zed是开源的，适用于macOS和Linux，Windows版本即将推出。

Pydantic 是一个面向开发者的综合平台，提供强大的数据验证、AI 开发工具和全栈可观测性解决方案。它通过利用类型提示进行运行时数据验证，并提供从本地开发到生产环境的深度洞察，从而在 Python 和其他语言中实现更快、更稳健的应用程序开发。

PromptLayer 是您用于 AI 工程的综合工作台，为提示词管理、评估和 LLM 可观测性提供统一平台。它使团队能够对每个提示词和代理进行版本控制、测试和监控，促进技术和非技术利益相关者之间的协作，从而高效地构建和扩展生产就绪的 AI 应用程序。

CopilotKit 是一个开源的全栈框架，专为开发者设计，用于构建、部署和自定义应用内 AI 协驾和代理应用。它提供前端组件、后端逻辑，并能与任何 LLM 或代理框架无缝集成，从而创建功能强大的、面向用户的 AI 助手。

Chainlit 是一个开源 Python 框架，专为开发人员设计，可快速构建和部署生产就绪的对话式 AI 应用。它能即时生成可定制的聊天界面，让您专注于后端逻辑和 LLM 交互。凭借与 LangChain、LlamaIndex 及主流 LLM 提供商的深度集成，Chainlit 简化了从简单聊天机器人到复杂数据驱动型 Copilot 的创建过程。

Klavis 是一个开发者平台，提供开源的模型上下文协议（MCP）集成，使 AI 应用程序能够安全、可扩展地连接到数千个外部工具和 API，如 Salesforce、Gmail 和 Slack。它简化了身份验证，增强了安全性，并加速了强大 AI 代理的开发。

MyScale 是一款高性能向量数据库，它独特地将向量搜索与强大的 SQL 功能相结合。它专为构建 RAG、语义搜索和推荐系统等高级 AI 应用而设计，通过允许开发人员使用单一、熟悉的界面对向量和结构化数据运行混合查询，从而简化技术栈。

GPT Researcher 是一款开源的自主 AI 代理，专为快速、深入的研究而设计。它能自动化整个研究流程，从可靠来源收集信息，到整理研究结果并生成带引用的综合报告。它非常适合开发人员、分析师和研究人员，可与任何 LLM 和搜索引擎集成，在几分钟内就任何主题提供准确、真实的结果。