promptfoo

Bolt Foundry为开发者提供开源工具，用于对大型语言模型（LLM）进行单元测试。它通过使用称为“评分器”的结构化、可测试的提示，将提示工程转变为一门科学的、数据驱动的过程。这确保了AI输出的可靠性、一致性和可衡量性，是构建生产级应用的理想选择。

Prompto 是一款免费、开源、基于浏览器的界面，用于与各种大型语言模型（LLM）进行交互。它利用 LangChain.js 直接连接到 OpenAI、Anthropic 等提供商以及通过 Ollama 连接的本地模型，提供模型比较竞技场、提示词模板和多 AI 对话等高级功能，同时通过本地存储数据来优先保护用户隐私。

Lakera 是一个AI原生安全平台，旨在保护生成式AI应用免受提示注入、数据泄露和合规性违规等威胁。它提供实时运行保护、由全球最大AI红队支持的持续威胁情报，以及通过单行代码即可轻松集成。Lakera 受到像 Dropbox 这样的企业信赖，以超低延迟保护所有主流模型和语言的AI代理和应用。

ArtisMind 是一个企业级 AI 提示工程平台，旨在利用数据驱动的多模型智能来构建、评分和完善 AI 提示。它提供科学的五阶段工作流程，用于为各种 AI 模型创建生产就绪、安全且优化的提示，解决提示注入、幻觉和质量不一致等挑战。

promptstart 是一个先进的AI提示工程平台，旨在帮助用户为各种AI模型创建、管理和优化提示。它拥有庞大的预制提示库、智能提示构建器和AI驱动的优化器，可提升AI生成内容和代码的质量与效率。

Prompto 是一款免费、开源、基于浏览器的界面，用于与各种大型语言模型（LLM）进行交互。它利用 LangChain.js 直接连接到 OpenAI、Anthropic 等提供商以及通过 Ollama 连接的本地模型，提供模型比较竞技场、提示词模板和多 AI 对话等高级功能，同时通过本地存储数据来优先保护用户隐私。

ModelFusion 是一款面向开发者和研究人员的一体化 LLM 工具包。它提供一套免费工具，包括成本计算器、提示词库和模型比较器，支持 GPT-4、Claude 和 Gemini 等 30 多种 AI 模型。它还提供统一的 API 和本地模型运行指南，以简化 AI 开发并优化成本。

Prompt Mixer 是一款强大的开源提示工程工具，为团队提供了一个协作工作区。它支持用户通过管理提示链、比较不同的大语言模型（LLM）和利用高级评估指标，来创建、测试、评估和部署由 AI 驱动的解决方案。

EvalsOne 是一个专为生成式AI应用设计的一站式评估平台。它使团队能够通过一个强大直观的界面，轻松地评估、迭代和优化LLM提示语、RAG流程和AI智能体，确保AI产品既健壮又具竞争力。

一个直观的网页版AI模型实验平台，用于实验和比较各种大型语言模型。在用户友好的界面中微调参数、测试提示词并分析来自GPT、Claude和Gemini等模型的输出。是提示词工程师、开发者和内容创作者的理想选择。

AirPrompt 是一个强大的提示词工程和测试平台。它帮助用户同时在 GPT-4、Claude 及开源模型等多个 AI 模型上测试、比较和优化提示词。通过动态变量、批量数据上传和并排结果比较等功能，它为开发者和内容创作者简化了工作流程，以构建高质量、高性价比的 AI 应用。

Bolt Foundry为开发者提供开源工具，用于对大型语言模型（LLM）进行单元测试。它通过使用称为“评分器”的结构化、可测试的提示，将提示工程转变为一门科学的、数据驱动的过程。这确保了AI输出的可靠性、一致性和可衡量性，是构建生产级应用的理想选择。

Lakera 是一个AI原生安全平台，旨在保护生成式AI应用免受提示注入、数据泄露和合规性违规等威胁。它提供实时运行保护、由全球最大AI红队支持的持续威胁情报，以及通过单行代码即可轻松集成。Lakera 受到像 Dropbox 这样的企业信赖，以超低延迟保护所有主流模型和语言的AI代理和应用。

ArtisMind 是一个企业级 AI 提示工程平台，旨在利用数据驱动的多模型智能来构建、评分和完善 AI 提示。它提供科学的五阶段工作流程，用于为各种 AI 模型创建生产就绪、安全且优化的提示，解决提示注入、幻觉和质量不一致等挑战。

Codegate 是一个为 AI 代理系统设计的开源安全网关和多路复用框架。由 Stacklok 开发，它提供安全的工作空间和基于策略的访问控制，使开发人员能够安全高效地构建和管理复杂的多代理应用程序。

Learn Prompting 是一个领先的教育平台，提供全面、有研究支持的提示工程和 AI 沟通课程。它受到超过300万用户和各大企业的信赖，为从初学者到高级专家的所有技能水平提供免费和付费培训，涵盖 AI 安全和红队测试等专业主题。

Ragas 是一个用于评估和测试检索增强生成（RAG）流程的开源 Python 框架。它提供了一套度量标准来衡量 LLM 应用的性能，从上下文检索到答案生成。Ragas 受到 LangChain 和 LlamaIndex 等行业领导者的信赖，通过识别和减轻幻觉、不相关响应等问题，帮助开发者构建更健壮、可靠和准确的 AI 系统。

getmaxim 是一个全面的生成式AI评估与可观测性平台，专为AI开发团队设计。它使用户能够通过对LLM和RAG管道进行广泛评估、自动化测试以及提供实时生产监控来测试、监控和改进AI应用，从而确保高质量、可靠和负责任的AI。

Charm 是一个开源工具和库的生态系统，旨在使命令行界面（CLI）变得华丽而强大。它为开发者提供用于 AI 驱动编码（Crush、Mods）、精美终端用户界面（Bubble Tea）、Markdown 渲染（Glow）和自托管 Git 服务器（Soft Serve）的应用程序。Charm 助力开发者使用现代化、优雅且功能强大的工具来构建、美化和增强他们的终端工作流。