getmaxim

Confident AI 是一個面向工程團隊的 LLM 評估與可觀測性平台。由開源庫 DeepEval 的創建者打造，它透過全面的指標、回歸測試和詳細的追蹤來幫助基準測試、保障和改進 LLM 應用，確保 AI 效能的穩定性。

LangWatch 是一個一體化的開源平台，用於監控、評估和優化 LLM 應用。它專注於透過模擬使用者環境進行 AI 代理測試，幫助團隊在生產前捕獲回歸和邊緣案例。該平台結合了可觀測性、評估、優化和護欄功能，以確保 AI 應用的可靠性、安全性和高效能。

Evidently AI 是一個面向AI產品的綜合性測試與評估平台，專注於LLM和ML模型的監控。它透過自動化評估、合成數據生成、持續測試和對抗性攻擊，幫助團隊確保AI的安全性、可靠性和性能。該平台基於一個強大的開源庫建構，專為數據科學家和MLOps工程師設計，用於在問題影響用戶前檢測幻覺、數據漂移和PII洩漏等問題。

Openlayer 是一個企業級的人工智慧評估與可觀測性平台。它幫助團隊在從開發到生產的整個生命週期中，測試、監控和治理傳統的機器學習模型及大型語言模型（LLM），確保系統的可靠性與合規性。

HoneyHive 是一款面向使用 LLM 和 AI 智慧體的開發人員的一體化 AI 可觀測性與評估平台。它提供了一個統一的解決方案，用於建構、測試、偵錯和監控 AI 應用，涵蓋從初步實驗到企業級部署的全過程。該平台幫助團隊系統地衡量 AI 品質，深入了解智慧體互動，監控成本和延遲等效能指標，並協作管理提示詞和資料集等關鍵資產，確保自信地交付可靠的 AI 產品。

Confident AI 是一個面向工程團隊的 LLM 評估與可觀測性平台。由開源庫 DeepEval 的創建者打造，它透過全面的指標、回歸測試和詳細的追蹤來幫助基準測試、保障和改進 LLM 應用，確保 AI 效能的穩定性。

Deepchecks 是一個用於評估、驗證和監控基於 LLM 的應用程式的端到端平台。它幫助人工智慧團隊定義、衡量和驗證人工智慧的進展，透過簡化從開發、CI/CD 到生產的整個測試流程，確保發布高品質、可靠的應用程式。

EvalsOne 是一個專為生成式AI應用設計的一站式評估平台。它使團隊能夠透過一個強大直觀的介面，輕鬆地評估、迭代和優化LLM提示語、RAG流程和AI智能體，確保AI產品既健壯又具競爭力。

Keywords AI 是一個專為AI新創公司和開發者設計的全面LLM可觀測性與監控平台。它提供統一的API來部署、測試、監控和優化LLM工作流程，支援超過200種模型，透過簡單的兩行程式碼整合，幫助團隊更快地建構和發布可靠的AI功能。

Velvet是一個開發者閘道，現已併入Arize AI，專為分析、評估和監控AI功能而設計。它為AI可觀測性、LLM追蹤和模型效能管理提供了一套全面的解決方案，幫助開發者從開發到生產的全過程建構和完善AI應用。

Basalt 是一個為開發者和產品團隊設計的端到端平台，用於建構、評估和監控可靠的 AI 代理。它提供了一套全面的工具，包括自動化評估、A/B 測試、帶 AI 助理的提示工程以及對開發者友善的 SDK，確保您的 AI 功能值得信賴並可隨時投入生產。

LangWatch 是一個一體化的開源平台，用於監控、評估和優化 LLM 應用。它專注於透過模擬使用者環境進行 AI 代理測試，幫助團隊在生產前捕獲回歸和邊緣案例。該平台結合了可觀測性、評估、優化和護欄功能，以確保 AI 應用的可靠性、安全性和高效能。

Meticulous 是一款由人工智能驅動的工具，徹底改變了前端測試。它透過記錄使用者互動來自動生成和維護視覺化端對端測試，無需手動編寫測試腳本。這有助於開發團隊發現回歸問題、涵蓋邊緣案例，並充滿信心地更快地發布程式碼，同時擺脫了測試不穩定或維護成本高昂的煩惱。

Momentic 是一個由人工智慧驅動的軟體測試平台，可加速開發週期。它使團隊能夠使用自然語言創建、運行和維護強大的端到端測試，消除不穩定的腳本並減少手動 QA 開銷。它具有低程式碼編輯器、自我修復定位器和無縫的 CI/CD 整合。

Signadot 是一個專為高速工程團隊設計的 Kubernetes 原生微服務測試平台。它將本地測試、預覽環境和由 AI 驅動的合約測試（SmartTests）統一到一個解決方案中。透過在幾秒鐘內創建輕量級、隔離的「沙箱」，它幫助團隊加速開發週期、降低基礎設施成本並提高發布品質，而無需複製整個環境。

RagaAI 是一個全面的人工智慧測試與可觀測性平台，旨在協助開發者和企業建構可靠的 AI 應用。它提供了一整套工具，用於觀察、評估和偵錯 AI 代理、大型語言模型（LLM）和 RAG 系統。核心功能包括代理測試、即時護欄、合成資料生成和微調能力。RagaAI 支援多模態資料（LLM、電腦視覺、表格資料），致力於自動化整個 AI 品質保證生命週期，從問題偵測到解決，確保 AI 部署的穩健性和可信度。

PrimeAI 是一個AI驅動的平台，旨在透過自動化品質保證（QA）流程來加速軟體開發。它為更快的錯誤偵測、自動化測試案例生成和全面的程式碼分析提供智慧解決方案，幫助開發團隊更有效率地建構和發布更高品質的產品。

Reliv 是一款已停止服務的人工智慧驅動的 QA 自動化服務，旨在簡化軟體測試流程。它使團隊能夠在無需大量編碼的情況下創建、管理和執行自動化測試，從而加速開發週期並提高應用程式品質。該服務現已停止營運。

一個面向開發者的平台，用於為AI應用創建可調、快速且經濟高效的評分和評估系統。它將定性標準轉化為精確的量化指標，用於模型監控、排名和RAG優化。