Tropir

Parea AI 是一個用於開發、測試和監控 LLM（大型語言模型）應用的一站式平台。它提供實驗追蹤、可觀測性、評估和人工標註工具，幫助團隊自信地將 AI 系統投入生產。

Langfuse 是一個開源的 LLM 工程平台，為偵錯、評估和改進 LLM 應用提供全面的工具。它提供追蹤、提示詞管理、評估框架和指標等功能，為使用大型語言模型進行建構的團隊簡化整個開發生命週期。

Braintrust 是一個用於開發、評估和部署穩健的 LLM 應用程式的端對端平台。它為提示詞工程、模型評估、即時追蹤和生產監控提供了一套全面的工具。Braintrust 專為技術和非技術團隊成員設計，有助於簡化 AI 開發生命週期，確保 AI 產品可靠、有效並為生產做好準備。

Vellum AI 是一個端對端的企業級平台，用於建構、評估和部署關鍵任務型AI代理和應用程式。它為編排、提示工程、RAG、評估和監控提供了一個統一的環境，使團隊能夠以10倍的速度建構可靠的AI解決方案。

Freeplay 是一個企業級平台，專為 AI 團隊設計，用於建構、測試和持續改進 AI 產品及智慧體。它將提示管理、實驗、LLM 可觀測性和資料審查統一到單一工作流程中，為加速產品品質和開發速度創建了強大的資料飛輪。

LangWatch 是一個一體化的開源平台，用於監控、評估和優化 LLM 應用。它專注於透過模擬使用者環境進行 AI 代理測試，幫助團隊在生產前捕獲回歸和邊緣案例。該平台結合了可觀測性、評估、優化和護欄功能，以確保 AI 應用的可靠性、安全性和高效能。

Parea AI 是一個用於開發、測試和監控 LLM（大型語言模型）應用的一站式平台。它提供實驗追蹤、可觀測性、評估和人工標註工具，幫助團隊自信地將 AI 系統投入生產。

Langfuse 是一個開源的 LLM 工程平台，為偵錯、評估和改進 LLM 應用提供全面的工具。它提供追蹤、提示詞管理、評估框架和指標等功能，為使用大型語言模型進行建構的團隊簡化整個開發生命週期。

Braintrust 是一個用於開發、評估和部署穩健的 LLM 應用程式的端對端平台。它為提示詞工程、模型評估、即時追蹤和生產監控提供了一套全面的工具。Braintrust 專為技術和非技術團隊成員設計，有助於簡化 AI 開發生命週期，確保 AI 產品可靠、有效並為生產做好準備。

Pydantic 是一個為開發者設計的綜合平台，提供強大的資料驗證、AI 開發工具和全端可觀測性解決方案。它透過利用型別提示進行執行時資料驗證，並提供從本地開發到生產環境的深度洞察，從而在 Python 和其他語言中實現更快、更穩健的應用程式開發。

Helicone 是一個為開發者提供的開源平台，整合了 AI 閘道和 LLM 可觀測性功能。它透過提供路由、監控、偵錯和分析 LLM 使用情況的工具，幫助建構可靠的 AI 應用程式。主要功能包括支援100多種模型的統一 API、智慧快取、速率限制、提示詞管理和詳細的效能分析。

FutureAGI 是一個全面的大型語言模型（LLM）可觀測性與評估平台，專為企業和開發者設計。它幫助建構、評估和改進 AI 應用，以實現高達 99% 的準確率，提供合成資料生成、無程式碼實驗、多模態評估和即時生產監控等工具。

HoneyHive 是一款面向使用 LLM 和 AI 智慧體的開發人員的一體化 AI 可觀測性與評估平台。它提供了一個統一的解決方案，用於建構、測試、偵錯和監控 AI 應用，涵蓋從初步實驗到企業級部署的全過程。該平台幫助團隊系統地衡量 AI 品質，深入了解智慧體互動，監控成本和延遲等效能指標，並協作管理提示詞和資料集等關鍵資產，確保自信地交付可靠的 AI 產品。

Metoro 是一個專為 Kubernetes 設計的 AI 驅動可觀測性平台。它利用 eBPF 技術實現零侵入式監控，能夠自主偵測問題、分析根本原因，並透過拉取請求自動生成程式碼修復。一分鐘內即可投入使用，為傳統監控工具提供了一個全面且具成本效益的替代方案。

Metorial 是一個專為 AI 代理設計的整合平台，使開發者能夠快速建構、部署和監控強大的代理式 AI 應用程式。它透過其無伺服器模型上下文協議 (MCP) 平台，提供與數百種工具、資料來源和 API 的無縫連接，為可擴展的 AI 解決方案提供強大的 SDK、可觀測性和企業級安全性。

Keywords AI 是一個專為AI新創公司和開發者設計的全面LLM可觀測性與監控平台。它提供統一的API來部署、測試、監控和優化LLM工作流程，支援超過200種模型，透過簡單的兩行程式碼整合，幫助團隊更快地建構和發布可靠的AI功能。

Atla AI 是一個專為 AI 代理（Agent）設計的可觀測性與評估平台。它透過深入洞察代理行為，幫助開發者發現、理解和修復代理的故障。該平台能自動偵測錯誤、識別重複出現的模式，並提供可行的改進建議，以持續提升代理的性能和任務完成率。

Valyr (前身為 Helicone) 是一個開源的 LLM 可觀測性平台和 AI 閘道。它幫助開發者監控、偵錯和分析他們的 AI 應用，透過單一整合即可存取超過100種模型，管理成本，並透過快取和速率限制等功能提高可靠性。

fixa 是一個專為 AI 語音代理設計的開源可觀測性平台。它透過追蹤延遲、打斷和對話正確性等關鍵指標，幫助開發者監控、偵錯和改進其語音 AI，確保提供高品質的使用者體驗。