promptfoo

Bolt Foundry fournit des outils open-source aux développeurs pour effectuer des tests unitaires sur les grands modèles de langage (LLM). Il transforme l'ingénierie de prompt en un processus scientifique et basé sur les données en utilisant des prompts structurés et testables appelés 'graders'. Cela garantit des sorties d'IA fiables, cohérentes et mesurables, ce qui le rend idéal pour la construction d'applications de niveau production.

Prompto est une interface gratuite, open-source et basée sur un navigateur pour interagir avec une large gamme de grands modèles de langage (LLM). Il utilise LangChain.js pour se connecter directement à des fournisseurs comme OpenAI, Anthropic et des modèles locaux via Ollama, offrant des fonctionnalités avancées telles qu'une arène de comparaison de modèles, des modèles de prompts et des discussions multi-IA, tout en priorisant la confidentialité de l'utilisateur en stockant les données localement.

Lakera est une plateforme de sécurité native pour l'IA conçue pour protéger les applications d'IA générative contre les menaces telles que l'injection de prompt, la fuite de données et les violations de conformité. Elle offre une protection d'exécution en temps réel, une intelligence continue sur les menaces alimentée par la plus grande équipe de red teaming IA au monde, et une intégration facile avec une seule ligne de code. Approuvée par des entreprises comme Dropbox, Lakera sécurise les agents et applications IA sur tous les principaux modèles et langues avec une latence ultra-faible.

ArtisMind est une plateforme d'ingénierie de prompts IA de niveau entreprise conçue pour construire, évaluer et perfectionner les prompts IA à l'aide d'une intelligence multi-modèle basée sur les données. Elle offre un flux de travail scientifique en 5 étapes pour créer des prompts prêts pour la production, sécurisés et optimisés pour divers modèles d'IA, abordant des défis tels que l'injection de prompts, les hallucinations et la qualité inconsistante.

promptstart est une plateforme avancée d'ingénierie de prompts IA conçue pour aider les utilisateurs à créer, gérer et optimiser des prompts pour divers modèles d'IA. Elle dispose d'une vaste bibliothèque de prompts préconçus, d'un constructeur de prompts intelligent et d'un optimiseur alimenté par l'IA pour améliorer la qualité et l'efficacité du contenu et du code générés par l'IA.

Prompto est une interface gratuite, open-source et basée sur un navigateur pour interagir avec une large gamme de grands modèles de langage (LLM). Il utilise LangChain.js pour se connecter directement à des fournisseurs comme OpenAI, Anthropic et des modèles locaux via Ollama, offrant des fonctionnalités avancées telles qu'une arène de comparaison de modèles, des modèles de prompts et des discussions multi-IA, tout en priorisant la confidentialité de l'utilisateur en stockant les données localement.

ModelFusion est une boîte à outils LLM tout-en-un pour les développeurs et les chercheurs. Elle offre une suite d'outils gratuits, dont un calculateur de coûts, une bibliothèque de prompts et un comparateur de modèles pour plus de 30 modèles d'IA comme GPT-4, Claude et Gemini. Elle fournit également une API unifiée et des guides pour exécuter des modèles localement afin de rationaliser le développement de l'IA et d'optimiser les coûts.

Prompt Mixer est un puissant outil open-source pour l'ingénierie de prompts, offrant un espace de travail collaboratif pour les équipes. Il permet aux utilisateurs de créer, tester, évaluer et déployer des solutions basées sur l'IA en gérant des chaînes de prompts, en comparant différents LLM et en utilisant des métriques d'évaluation avancées.

EvalsOne est une plateforme d'évaluation tout-en-un conçue pour les applications d'IA générative. Elle permet aux équipes d'évaluer, d'itérer et d'optimiser sans effort les prompts LLM, les pipelines RAG et les agents IA via une interface puissante et intuitive, garantissant des produits IA robustes et compétitifs.

Un terrain de jeu web intuitif pour expérimenter et comparer divers grands modèles de langage. Affinez les paramètres, testez les prompts et analysez les sorties de modèles comme GPT, Claude et Gemini dans une interface conviviale. Idéal pour les ingénieurs de prompt, les développeurs et les créateurs de contenu.

AirPrompt est une puissante plateforme d'ingénierie et de test de prompts. Elle permet aux utilisateurs de tester, comparer et optimiser simultanément des prompts IA sur plusieurs modèles comme GPT-4, Claude et des alternatives open-source. Dotée de variables dynamiques, de téléversements de données en masse et d'une comparaison des résultats côte à côte, elle simplifie le flux de travail des développeurs et des créateurs de contenu pour construire des applications IA de haute qualité et rentables.

Bolt Foundry fournit des outils open-source aux développeurs pour effectuer des tests unitaires sur les grands modèles de langage (LLM). Il transforme l'ingénierie de prompt en un processus scientifique et basé sur les données en utilisant des prompts structurés et testables appelés 'graders'. Cela garantit des sorties d'IA fiables, cohérentes et mesurables, ce qui le rend idéal pour la construction d'applications de niveau production.

Lakera est une plateforme de sécurité native pour l'IA conçue pour protéger les applications d'IA générative contre les menaces telles que l'injection de prompt, la fuite de données et les violations de conformité. Elle offre une protection d'exécution en temps réel, une intelligence continue sur les menaces alimentée par la plus grande équipe de red teaming IA au monde, et une intégration facile avec une seule ligne de code. Approuvée par des entreprises comme Dropbox, Lakera sécurise les agents et applications IA sur tous les principaux modèles et langues avec une latence ultra-faible.

ArtisMind est une plateforme d'ingénierie de prompts IA de niveau entreprise conçue pour construire, évaluer et perfectionner les prompts IA à l'aide d'une intelligence multi-modèle basée sur les données. Elle offre un flux de travail scientifique en 5 étapes pour créer des prompts prêts pour la production, sécurisés et optimisés pour divers modèles d'IA, abordant des défis tels que l'injection de prompts, les hallucinations et la qualité inconsistante.

Codegate est une passerelle de sécurité open-source et un framework de multiplexage pour les systèmes d'agents IA. Développé par Stacklok, il fournit des espaces de travail sécurisés et un contrôle d'accès basé sur des politiques, permettant aux développeurs de construire et de gérer des applications multi-agents complexes de manière sûre et efficace.

Learn Prompting est une plateforme éducative de premier plan offrant des cours complets et basés sur la recherche sur l'ingénierie de prompt et la communication avec l'IA. Approuvée par plus de 3 millions d'utilisateurs et de grandes entreprises, elle propose des formations gratuites et payantes pour tous les niveaux, des débutants aux experts avancés, y compris des sujets spécialisés comme la sécurité de l'IA et le red-teaming.

Ragas est un framework Python open-source pour l'évaluation et le test des pipelines de Génération Augmentée par la Récupération (RAG). Il fournit une suite de métriques pour mesurer la performance de vos applications LLM, de la récupération de contexte à la génération de réponses. Approuvé par des leaders de l'industrie comme LangChain et LlamaIndex, Ragas aide les développeurs à construire des systèmes d'IA plus robustes, fiables et précis en identifiant et en atténuant les problèmes tels que les hallucinations et les réponses non pertinentes.

getmaxim est une plateforme complète d'évaluation et d'observabilité GenAI conçue pour les équipes de développement IA. Elle permet aux utilisateurs de tester, surveiller et améliorer les applications IA en exécutant des évaluations approfondies sur les LLM et les pipelines RAG, en automatisant les tests et en fournissant une surveillance de la production en temps réel pour garantir une IA de haute qualité, fiable et responsable.

Charm est un écosystème d'outils et de bibliothèques open-source conçu pour rendre l'interface en ligne de commande (CLI) glamour et puissante. Il fournit aux développeurs des applications pour le codage assisté par IA (Crush, Mods), de superbes interfaces utilisateur de terminal (Bubble Tea), le rendu de markdown (Glow) et des serveurs Git auto-hébergés (Soft Serve). Charm permet aux développeurs de construire, styliser et améliorer leurs flux de travail dans le terminal avec des outils modernes, élégants et hautement fonctionnels.