promptfoo

Bolt Foundry為開發者提供開源工具，用於對大型語言模型（LLM）進行單元測試。它透過使用稱為「評分器」的結構化、可測試的提示，將提示工程轉變為一門科學的、數據驅動的過程。這確保了AI輸出的可靠性、一致性和可衡量性，是建構生產級應用的理想選擇。

Prompto 是一款免費、開源、基於瀏覽器的介面，用於與各種大型語言模型（LLM）進行互動。它利用 LangChain.js 直接連接到 OpenAI、Anthropic 等供應商以及透過 Ollama 連接的本地模型，提供模型比較競技場、提示詞範本和多 AI 對話等進階功能，同時透過本機儲存資料來優先保護使用者隱私。

Lakera 是一個 AI 原生安全平台，旨在保護生成式 AI 應用程式免受提示注入、資料外洩和合規性違規等威脅。它提供即時運行保護、由全球最大 AI 紅隊支援的持續威脅情報，以及透過單行程式碼即可輕鬆整合。Lakera 受到像 Dropbox 這樣的企業信賴，以超低延遲保護所有主流模型和語言的 AI 代理和應用程式。

ArtisMind 是一個企業級 AI 提示工程平台，旨在利用數據驅動的多模型智能來構建、評分和完善 AI 提示。它提供科學的五階段工作流程，用於為各種 AI 模型創建生產就緒、安全且優化的提示，解決提示注入、幻覺和質量不一致等挑戰。

promptstart 是一個先進的AI提示工程平台，旨在幫助使用者為各種AI模型建立、管理和優化提示。它擁有龐大的預製提示庫、智慧提示建構器和AI驅動的優化器，可提升AI生成內容和程式碼的品質與效率。

Prompto 是一款免費、開源、基於瀏覽器的介面，用於與各種大型語言模型（LLM）進行互動。它利用 LangChain.js 直接連接到 OpenAI、Anthropic 等供應商以及透過 Ollama 連接的本地模型，提供模型比較競技場、提示詞範本和多 AI 對話等進階功能，同時透過本機儲存資料來優先保護使用者隱私。

ModelFusion 是一款面向開發者和研究人員的一體化 LLM 工具包。它提供一套免費工具，包括成本計算器、提示詞庫和模型比較器，支援 GPT-4、Claude 和 Gemini 等 30 多種 AI 模型。它還提供統一的 API 和本地模型運行指南，以簡化 AI 開發並優化成本。

Prompt Mixer 是一款強大的開源提示工程工具，為團隊提供了一個協作工作區。它支援使用者透過管理提示鏈、比較不同的大型語言模型（LLM）和利用進階評估指標，來創建、測試、評估和部署由 AI 驅動的解決方案。

EvalsOne 是一個專為生成式AI應用設計的一站式評估平台。它使團隊能夠透過一個強大直觀的介面，輕鬆地評估、迭代和優化LLM提示語、RAG流程和AI智能體，確保AI產品既健壯又具競爭力。

一個直觀的網頁版AI模型實驗平台，用於實驗和比較各種大型語言模型。在使用者友好的介面中微調參數、測試提示詞並分析來自GPT、Claude和Gemini等模型的輸出。是提示詞工程師、開發者和內容創作者的理想選擇。

AirPrompt 是一個強大的提示詞工程和測試平台。它幫助用戶同時在 GPT-4、Claude 及開源模型等多個 AI 模型上測試、比較和優化提示詞。透過動態變數、批量數據上傳和並排結果比較等功能，它為開發者和內容創作者簡化了工作流程，以建構高品質、高性價比的 AI 應用。

Bolt Foundry為開發者提供開源工具，用於對大型語言模型（LLM）進行單元測試。它透過使用稱為「評分器」的結構化、可測試的提示，將提示工程轉變為一門科學的、數據驅動的過程。這確保了AI輸出的可靠性、一致性和可衡量性，是建構生產級應用的理想選擇。

Lakera 是一個 AI 原生安全平台，旨在保護生成式 AI 應用程式免受提示注入、資料外洩和合規性違規等威脅。它提供即時運行保護、由全球最大 AI 紅隊支援的持續威脅情報，以及透過單行程式碼即可輕鬆整合。Lakera 受到像 Dropbox 這樣的企業信賴，以超低延遲保護所有主流模型和語言的 AI 代理和應用程式。

ArtisMind 是一個企業級 AI 提示工程平台，旨在利用數據驅動的多模型智能來構建、評分和完善 AI 提示。它提供科學的五階段工作流程，用於為各種 AI 模型創建生產就緒、安全且優化的提示，解決提示注入、幻覺和質量不一致等挑戰。

Codegate 是一個為 AI 代理系統設計的開源安全閘道和多路復用框架。由 Stacklok 開發，它提供安全的工作空間和基於策略的存取控制，使開發人員能夠安全高效地建構和管理複雜的多代理應用程式。

Learn Prompting 是一個領先的教育平台，提供全面、有研究支持的提示工程和 AI 溝通課程。它受到超過300萬用戶和各大企業的信賴，為從初學者到高級專家的所有技能水平提供免費和付費培訓，涵蓋 AI 安全和紅隊測試等專業主題。

Ragas 是一個用於評估和測試檢索增強生成（RAG）流程的開源 Python 框架。它提供了一套度量標準來衡量 LLM 應用的性能，從上下文檢索到答案生成。Ragas 受到 LangChain 和 LlamaIndex 等行業領導者的信賴，透過識別和減輕幻覺、不相關響應等問題，幫助開發者建構更穩健、可靠和準確的 AI 系統。

getmaxim 是一個全面的生成式AI評估與可觀測性平台，專為AI開發團隊設計。它讓使用者能夠透過對LLM和RAG管道進行廣泛評估、自動化測試以及提供即時生產監控來測試、監控和改進AI應用，從而確保高品質、可靠和負責任的AI。

Charm 是一個開源工具與程式庫的生態系統，旨在使命令列介面（CLI）變得華麗而強大。它為開發者提供用於 AI 驅動編碼（Crush、Mods）、精美終端使用者介面（Bubble Tea）、Markdown 渲染（Glow）和自架 Git 伺服器（Soft Serve）的應用程式。Charm 助力開發者使用現代化、優雅且功能強大的工具來建構、美化和增強他們的終端工作流程。