Prompto

promptfoo est un framework complet de test et d'évaluation pour les grands modèles de langage (LLM). Il aide les développeurs et les entreprises à comparer la qualité des prompts, à évaluer les performances des modèles et à renforcer la sécurité de l'IA grâce à des tests systématiques, du benchmarking et du red teaming alimenté par l'IA. Il prend en charge plus de 50 fournisseurs de LLM, y compris les modèles locaux, et offre une CLI conviviale pour les développeurs pour une intégration transparente dans les flux de travail de développement.

Bolt Foundry fournit des outils open-source aux développeurs pour effectuer des tests unitaires sur les grands modèles de langage (LLM). Il transforme l'ingénierie de prompt en un processus scientifique et basé sur les données en utilisant des prompts structurés et testables appelés 'graders'. Cela garantit des sorties d'IA fiables, cohérentes et mesurables, ce qui le rend idéal pour la construction d'applications de niveau production.

Une plateforme d'ingénierie de prompts alimentée par l'IA, conçue pour aider les utilisateurs à créer, affiner et optimiser des prompts pour les grands modèles de langage (LLM). Elle améliore la clarté, le contexte et la structure des prompts pour générer des résultats IA de qualité supérieure, plus précis et cohérents pour diverses tâches.

CrayEye est un outil d'IA multimodal, gratuit et open-source, qui vous permet de créer et de partager des prompts de vision enrichis avec le contexte du monde réel provenant des capteurs de votre appareil (comme la caméra, le GPS) et des API (comme la météo). Expérimentez avec des modèles visuels pour interpréter votre environnement de manière nouvelle et contextuelle.

Redmo est une puissante plateforme d'ingénierie de prompts qui permet aux utilisateurs de créer, gérer et exécuter des modèles de prompts dynamiques avec des variables. Elle offre un support API pour une intégration transparente et dispose d'une compatibilité multi-LLM, y compris GPT-4, pour rationaliser et faire évoluer la génération de contenu et les flux de travail automatisés.

Prompt Refine est une puissante plateforme d'ingénierie de prompts, permettant aux développeurs et chercheurs de mener des expériences systématiques. Elle aide à tester, comparer, versionner et organiser les prompts pour divers LLM comme OpenAI et Anthropic, rationalisant le processus d'optimisation et améliorant la qualité des résultats du modèle.

ModelFusion est une boîte à outils LLM tout-en-un pour les développeurs et les chercheurs. Elle offre une suite d'outils gratuits, dont un calculateur de coûts, une bibliothèque de prompts et un comparateur de modèles pour plus de 30 modèles d'IA comme GPT-4, Claude et Gemini. Elle fournit également une API unifiée et des guides pour exécuter des modèles localement afin de rationaliser le développement de l'IA et d'optimiser les coûts.

Prompt Mixer est un puissant outil open-source pour l'ingénierie de prompts, offrant un espace de travail collaboratif pour les équipes. Il permet aux utilisateurs de créer, tester, évaluer et déployer des solutions basées sur l'IA en gérant des chaînes de prompts, en comparant différents LLM et en utilisant des métriques d'évaluation avancées.

Backmesh est un Backend as a Service (BaaS) open-source conçu pour les applications d'IA. Il agit comme une passerelle d'API LLM sécurisée, permettant aux développeurs d'appeler des API LLM comme OpenAI et Gemini directement depuis des applications web ou mobiles sans exposer de clés privées. Il offre des fonctionnalités telles que l'authentification JWT, la limitation de débit par utilisateur et des analyses intégrées pour gérer et surveiller efficacement l'utilisation de l'API.

Trainkore est une plateforme unifiée pour les développeurs afin d'optimiser les opérations LLM. Elle automatise la génération de prompts, bascule dynamiquement entre les modèles d'IA comme GPT-4o et Gemini pour réduire les coûts jusqu'à 85%, et fournit une suite d'observabilité complète pour le suivi des performances et le débogage. Elle simplifie l'intégration et améliore le développement d'applications d'IA.

promptfoo est un framework complet de test et d'évaluation pour les grands modèles de langage (LLM). Il aide les développeurs et les entreprises à comparer la qualité des prompts, à évaluer les performances des modèles et à renforcer la sécurité de l'IA grâce à des tests systématiques, du benchmarking et du red teaming alimenté par l'IA. Il prend en charge plus de 50 fournisseurs de LLM, y compris les modèles locaux, et offre une CLI conviviale pour les développeurs pour une intégration transparente dans les flux de travail de développement.

Bolt Foundry fournit des outils open-source aux développeurs pour effectuer des tests unitaires sur les grands modèles de langage (LLM). Il transforme l'ingénierie de prompt en un processus scientifique et basé sur les données en utilisant des prompts structurés et testables appelés 'graders'. Cela garantit des sorties d'IA fiables, cohérentes et mesurables, ce qui le rend idéal pour la construction d'applications de niveau production.

LobeHub est une plateforme d'IA tout-en-un qui vous permet de construire et de gérer une équipe personnalisée d'Agents IA. Elle offre une expérience utilisateur supérieure aux interfaces LLM standard comme ChatGPT, avec un support pour de nombreux modèles, plugins et interactions multimodales. Créez, partagez et utilisez des agents spécialisés pour des tâches allant du codage et de la rédaction à la recherche académique et à la vie quotidienne, le tout au sein d'une seule interface de chat intuitive.

Langfuse est une plateforme d'ingénierie LLM open source qui fournit des outils complets pour le débogage, l'évaluation et l'amélioration des applications LLM. Elle offre des fonctionnalités telles que le traçage, la gestion des prompts, les cadres d'évaluation et les métriques pour rationaliser l'ensemble du cycle de vie du développement pour les équipes construisant avec de grands modèles de langage.

Continue est un assistant de code IA open-source et personnalisable pour VS Code et JetBrains. Il améliore la productivité des développeurs avec l'auto-complétion intelligente, le chat contextuel et la refactorisation en ligne, prenant en charge n'importe quel LLM, y compris les modèles locaux et sur site pour une confidentialité et un contrôle maximum.

Latitude est une plateforme de développement open-source conçue pour construire, évaluer et déployer des applications basées sur les Grands Modèles de Langage (LLM), avec un accent particulier sur la création d'agents IA autonomes. Elle fournit une suite complète d'outils pour les développeurs afin d'expérimenter, d'affiner et de faire évoluer leurs solutions d'IA.

Chainlit est un framework Python open-source permettant aux développeurs de créer et de déployer rapidement des applications d'IA conversationnelle prêtes pour la production. Il fournit une interface de chat instantanée et personnalisable, vous permettant de vous concentrer sur votre logique backend et les interactions avec les LLM. Grâce à des intégrations profondes avec LangChain, LlamaIndex et les principaux fournisseurs de LLM, Chainlit simplifie la création de tout, des simples chatbots aux copilotes complexes basés sur les données.

APIPark est une passerelle IA open-source et un portail pour développeurs conçus pour aider les entreprises à gérer, intégrer et déployer efficacement les services d'IA. Il centralise les appels LLM, réduit les coûts et fournit des outils pour le partage, la surveillance et la sécurité des API.

boundaryml (BAML) est un langage de programmation et une boîte à outils spécialisés permettant aux développeurs d'extraire de manière fiable des données structurées à partir de grands modèles de langage (LLM). Il transforme l'ingénierie complexe des prompts en un processus rationalisé, semblable à du code, garantissant des sorties typées et corrigées des erreurs sur divers LLM et langages de programmation comme Python et TypeScript. Il est conçu pour améliorer la fiabilité, réduire les coûts et accélérer les cycles de développement des applications d'IA.