usevelvet

Arize 是一個專為開發、可觀測性與評估而設計的人工智慧與代理工程平台。它為團隊提供統一的解決方案，以更快地建構、監控、除錯和改進 LLM 及機器學習模型。透過打通開發與生產之間的閉環，Arize 協助確保人工智慧系統在規模化應用中可靠、值得信賴且高效能。

HoneyHive 是一款面向使用 LLM 和 AI 智慧體的開發人員的一體化 AI 可觀測性與評估平台。它提供了一個統一的解決方案，用於建構、測試、偵錯和監控 AI 應用，涵蓋從初步實驗到企業級部署的全過程。該平台幫助團隊系統地衡量 AI 品質，深入了解智慧體互動，監控成本和延遲等效能指標，並協作管理提示詞和資料集等關鍵資產，確保自信地交付可靠的 AI 產品。

getmaxim 是一個全面的生成式AI評估與可觀測性平台，專為AI開發團隊設計。它讓使用者能夠透過對LLM和RAG管道進行廣泛評估、自動化測試以及提供即時生產監控來測試、監控和改進AI應用，從而確保高品質、可靠和負責任的AI。

Keywords AI 是一個專為AI新創公司和開發者設計的全面LLM可觀測性與監控平台。它提供統一的API來部署、測試、監控和優化LLM工作流程，支援超過200種模型，透過簡單的兩行程式碼整合，幫助團隊更快地建構和發布可靠的AI功能。

WhyLabs 是一個專為 MLOps、SRE 和安全團隊設計的 AI 可觀測性與安全平台。它提供工具來監控、保護和優化 AI 應用，包括 LLM 和預測模型。該平台能即時偵測數據漂移、性能下降和提示注入等安全威脅，同時採用保護隱私的架構，絕不移動或複製原始數據。

Athina 是一個協作式 AI 開發平台，旨在幫助團隊以 10 倍的速度建構、測試和監控 LLM 應用程式。它為提示工程、評估、實驗、標註和生產監控提供了一套全面的工具。Athina 支援技術和非技術使用者，確保無縫協作和高品質、可靠的 AI 系統的部署。

Basalt 是一個為開發者和產品團隊設計的端到端平台，用於建構、評估和監控可靠的 AI 代理。它提供了一套全面的工具，包括自動化評估、A/B 測試、帶 AI 助理的提示工程以及對開發者友善的 SDK，確保您的 AI 功能值得信賴並可隨時投入生產。

Parea AI 是一個用於開發、測試和監控 LLM（大型語言模型）應用的一站式平台。它提供實驗追蹤、可觀測性、評估和人工標註工具，幫助團隊自信地將 AI 系統投入生產。

getmaxim 是一個全面的生成式AI評估與可觀測性平台，專為AI開發團隊設計。它讓使用者能夠透過對LLM和RAG管道進行廣泛評估、自動化測試以及提供即時生產監控來測試、監控和改進AI應用，從而確保高品質、可靠和負責任的AI。

Keywords AI 是一個專為AI新創公司和開發者設計的全面LLM可觀測性與監控平台。它提供統一的API來部署、測試、監控和優化LLM工作流程，支援超過200種模型，透過簡單的兩行程式碼整合，幫助團隊更快地建構和發布可靠的AI功能。

Valyr (前身為 Helicone) 是一個開源的 LLM 可觀測性平台和 AI 閘道。它幫助開發者監控、偵錯和分析他們的 AI 應用，透過單一整合即可存取超過100種模型，管理成本，並透過快取和速率限制等功能提高可靠性。

一個面向開發者的平台，用於為AI應用創建可調、快速且經濟高效的評分和評估系統。它將定性標準轉化為精確的量化指標，用於模型監控、排名和RAG優化。

Deepchecks 是一個用於評估、驗證和監控基於 LLM 的應用程式的端到端平台。它幫助人工智慧團隊定義、衡量和驗證人工智慧的進展，透過簡化從開發、CI/CD 到生產的整個測試流程，確保發布高品質、可靠的應用程式。

Orq.ai 是一個端對端的生成式 AI 協作平台，專為軟體團隊設計，旨在將 LLM 應用從原型擴展到生產環境。它提供實驗、部署和可觀測性工具，使團隊能夠自信、可控地建構、監控和優化代理式 AI 系統。

Scorecard 是一個用於評估、優化和部署企業級 AI 代理的端到端平台。它幫助團隊用結構化評估取代主觀測試，提供持續監控、提示詞管理和效能指標等工具，從而充滿信心地建構值得信賴且可靠的 AI 應用程式。

EvalsOne 是一個專為生成式AI應用設計的一站式評估平台。它使團隊能夠透過一個強大直觀的介面，輕鬆地評估、迭代和優化LLM提示語、RAG流程和AI智能體，確保AI產品既健壯又具競爭力。

Arize 是一個專為開發、可觀測性與評估而設計的人工智慧與代理工程平台。它為團隊提供統一的解決方案，以更快地建構、監控、除錯和改進 LLM 及機器學習模型。透過打通開發與生產之間的閉環，Arize 協助確保人工智慧系統在規模化應用中可靠、值得信賴且高效能。

Evidently AI 是一個面向AI產品的綜合性測試與評估平台，專注於LLM和ML模型的監控。它透過自動化評估、合成數據生成、持續測試和對抗性攻擊，幫助團隊確保AI的安全性、可靠性和性能。該平台基於一個強大的開源庫建構，專為數據科學家和MLOps工程師設計，用於在問題影響用戶前檢測幻覺、數據漂移和PII洩漏等問題。

Confident AI 是一個面向工程團隊的 LLM 評估與可觀測性平台。由開源庫 DeepEval 的創建者打造，它透過全面的指標、回歸測試和詳細的追蹤來幫助基準測試、保障和改進 LLM 應用，確保 AI 效能的穩定性。