Giskard

Evidently AI 是一個面向AI產品的綜合性測試與評估平台，專注於LLM和ML模型的監控。它透過自動化評估、合成數據生成、持續測試和對抗性攻擊，幫助團隊確保AI的安全性、可靠性和性能。該平台基於一個強大的開源庫建構，專為數據科學家和MLOps工程師設計，用於在問題影響用戶前檢測幻覺、數據漂移和PII洩漏等問題。

RagaAI 是一個全面的人工智慧測試與可觀測性平台，旨在協助開發者和企業建構可靠的 AI 應用。它提供了一整套工具，用於觀察、評估和偵錯 AI 代理、大型語言模型（LLM）和 RAG 系統。核心功能包括代理測試、即時護欄、合成資料生成和微調能力。RagaAI 支援多模態資料（LLM、電腦視覺、表格資料），致力於自動化整個 AI 品質保證生命週期，從問題偵測到解決，確保 AI 部署的穩健性和可信度。

Maihem 是一個先進的AI安全與機器人平台，專注於為大型語言模型（LLM）應用提供自動化的紅隊演練和漏洞測試。它系統性地測試OWASP Top 10 LLM漏洞，如提示注入和數據投毒，以確保AI系統的安全、可靠和合規部署。

Qase 是一個 AI 優先的測試管理平台，專為 QA 團隊設計，旨在提高軟體交付速度和品質。它將手動和自動化測試統一到一個直觀的工作空間中，利用 AI 生成、轉換和分析測試，並與超過 35 種開發工具無縫整合。

Katalon 是一個全面的、由 AI 增強的測試自動化平台，適用於 Web、API、行動和桌面應用程式。它透過低程式碼、全程式碼和無程式碼解決方案為各種規模的團隊賦能，簡化從測試創建、執行到分析和管理的整個品質生命週期。

Evidently AI 是一個面向AI產品的綜合性測試與評估平台，專注於LLM和ML模型的監控。它透過自動化評估、合成數據生成、持續測試和對抗性攻擊，幫助團隊確保AI的安全性、可靠性和性能。該平台基於一個強大的開源庫建構，專為數據科學家和MLOps工程師設計，用於在問題影響用戶前檢測幻覺、數據漂移和PII洩漏等問題。

Deepchecks 是一個用於評估、驗證和監控基於 LLM 的應用程式的端到端平台。它幫助人工智慧團隊定義、衡量和驗證人工智慧的進展，透過簡化從開發、CI/CD 到生產的整個測試流程，確保發布高品質、可靠的應用程式。

RagaAI 是一個全面的人工智慧測試與可觀測性平台，旨在協助開發者和企業建構可靠的 AI 應用。它提供了一整套工具，用於觀察、評估和偵錯 AI 代理、大型語言模型（LLM）和 RAG 系統。核心功能包括代理測試、即時護欄、合成資料生成和微調能力。RagaAI 支援多模態資料（LLM、電腦視覺、表格資料），致力於自動化整個 AI 品質保證生命週期，從問題偵測到解決，確保 AI 部署的穩健性和可信度。

Maihem 是一個先進的AI安全與機器人平台，專注於為大型語言模型（LLM）應用提供自動化的紅隊演練和漏洞測試。它系統性地測試OWASP Top 10 LLM漏洞，如提示注入和數據投毒，以確保AI系統的安全、可靠和合規部署。

promptfoo 是一個全面性的大型語言模型（LLM）測試與評估框架。它協助開發者和企業透過系統性測試、基準評估和AI驅動的紅隊演練，來比較提示詞品質、評估模型效能並增強AI安全性。它支援超過50家LLM供應商，包括本地模型，並提供對開發者友善的CLI，可無縫整合至開發工作流程中。

Autoblocks 是一個面向 AI 開發團隊的綜合平台，用於測試、評估和發布安全、可靠的 AI 應用程式。它專為醫療、金融等高風險行業設計，簡化了開發人員與領域專家 (SME) 之間的協作，以加速可信賴的 AI 聊天機器人和智能體的部署。

Robust Intelligence（現為思科旗下公司）是一個端對端的AI風險管理平台。它透過即時的AI防火牆和自動化測試，在AI模型的整個生命週期內保障其安全，幫助企業減輕安全、道德和營運風險，從而安全、負責任地部署AI。

EvalsOne 是一個專為生成式AI應用設計的一站式評估平台。它使團隊能夠透過一個強大直觀的介面，輕鬆地評估、迭代和優化LLM提示語、RAG流程和AI智能體，確保AI產品既健壯又具競爭力。

Qase 是一個 AI 優先的測試管理平台，專為 QA 團隊設計，旨在提高軟體交付速度和品質。它將手動和自動化測試統一到一個直觀的工作空間中，利用 AI 生成、轉換和分析測試，並與超過 35 種開發工具無縫整合。

Katalon 是一個全面的、由 AI 增強的測試自動化平台，適用於 Web、API、行動和桌面應用程式。它透過低程式碼、全程式碼和無程式碼解決方案為各種規模的團隊賦能，簡化從測試創建、執行到分析和管理的整個品質生命週期。

Testsigma 是一個統一的、由人工智慧驅動的測試自動化平台，使團隊能夠無需程式碼即可為 Web、行動、API 和 ERP 應用程式建立、執行和維護測試。它使用人工智慧代理來加速測試生成，將維護工作減少90%，並大規模實現端到端測試。

getmaxim 是一個全面的生成式AI評估與可觀測性平台，專為AI開發團隊設計。它讓使用者能夠透過對LLM和RAG管道進行廣泛評估、自動化測試以及提供即時生產監控來測試、監控和改進AI應用，從而確保高品質、可靠和負責任的AI。

Confident AI 是一個面向工程團隊的 LLM 評估與可觀測性平台。由開源庫 DeepEval 的創建者打造，它透過全面的指標、回歸測試和詳細的追蹤來幫助基準測試、保障和改進 LLM 應用，確保 AI 效能的穩定性。

Virtuoso 是一個由人工智能驅動的、用於Web應用程式的無程式碼測試自動化平台。它使QA團隊和開發人員能夠使用自然語言創建、執行和維護端對端測試。其智能機器人像人類一樣導航應用程式，而其自我修復功能可自動適應UI變化，顯著減少測試維護工作並加速軟體交付週期。