promptfoo

Bolt Foundry proporciona herramientas de código abierto para que los desarrolladores realicen pruebas unitarias en Modelos de Lenguaje Grandes (LLMs). Transforma la ingeniería de prompts en un proceso científico y basado en datos mediante el uso de prompts estructurados y comprobables llamados 'graders'. Esto garantiza resultados de IA fiables, consistentes y medibles, lo que lo hace ideal para construir aplicaciones de nivel de producción.

Prompto es una interfaz gratuita, de código abierto y basada en navegador para interactuar con una amplia gama de Grandes Modelos de Lenguaje (LLMs). Utiliza LangChain.js para conectarse directamente a proveedores como OpenAI, Anthropic y modelos locales a través de Ollama, ofreciendo funciones avanzadas como una Arena de comparación de modelos, plantillas de prompts y discusiones multi-IA, todo mientras prioriza la privacidad del usuario al almacenar los datos localmente.

Lakera es una plataforma de seguridad nativa de IA diseñada para proteger las aplicaciones de IA Generativa contra amenazas como la inyección de prompts, la fuga de datos y las violaciones de cumplimiento. Ofrece protección en tiempo de ejecución, inteligencia de amenazas continua impulsada por el equipo de red teaming de IA más grande del mundo y una fácil integración con una sola línea de código. Con la confianza de empresas como Dropbox, Lakera asegura agentes y aplicaciones de IA en todos los principales modelos e idiomas con una latencia ultrabaja.

ArtisMind es una plataforma de ingeniería de prompts de IA de nivel empresarial diseñada para construir, puntuar y perfeccionar prompts de IA utilizando inteligencia multi-modelo basada en datos. Ofrece un flujo de trabajo científico de 5 etapas para crear prompts listos para producción, seguros y optimizados para varios modelos de IA, abordando desafíos como la inyección de prompts, las alucinaciones y la calidad inconsistente.

promptstart es una plataforma avanzada de ingeniería de prompts de IA diseñada para ayudar a los usuarios a crear, gestionar y optimizar prompts para diversos modelos de IA. Cuenta con una vasta biblioteca de prompts predefinidos, un constructor de prompts inteligente y un optimizador impulsado por IA para mejorar la calidad y eficiencia del contenido y código generados por IA.

Prompto es una interfaz gratuita, de código abierto y basada en navegador para interactuar con una amplia gama de Grandes Modelos de Lenguaje (LLMs). Utiliza LangChain.js para conectarse directamente a proveedores como OpenAI, Anthropic y modelos locales a través de Ollama, ofreciendo funciones avanzadas como una Arena de comparación de modelos, plantillas de prompts y discusiones multi-IA, todo mientras prioriza la privacidad del usuario al almacenar los datos localmente.

ModelFusion es un kit de herramientas LLM todo en uno para desarrolladores e investigadores. Ofrece un conjunto de herramientas gratuitas, incluyendo una calculadora de costos, una biblioteca de prompts y un comparador de modelos para más de 30 modelos de IA como GPT-4, Claude y Gemini. También proporciona una API unificada y guías para ejecutar modelos localmente para agilizar el desarrollo de IA y optimizar costos.

Prompt Mixer es una potente herramienta de código abierto para la ingeniería de prompts, que proporciona un espacio de trabajo colaborativo para equipos. Permite a los usuarios crear, probar, evaluar e implementar soluciones impulsadas por IA gestionando cadenas de prompts, comparando diferentes LLMs y utilizando métricas de evaluación avanzadas.

EvalsOne es una plataforma de evaluación todo en uno diseñada para aplicaciones de IA generativa. Permite a los equipos evaluar, iterar y optimizar prompts de LLM, pipelines RAG y agentes de IA sin esfuerzo a través de una interfaz potente e intuitiva, garantizando productos de IA robustos y competitivos.

Un playground intuitivo basado en la web para experimentar y comparar varios modelos de lenguaje grandes. Ajusta parámetros, prueba prompts y analiza los resultados de modelos como GPT, Claude y Gemini en una interfaz fácil de usar. Ideal para ingenieros de prompts, desarrolladores y creadores de contenido.

AirPrompt es una potente plataforma de ingeniería y prueba de prompts. Permite a los usuarios probar, comparar y optimizar simultáneamente prompts de IA en múltiples modelos como GPT-4, Claude y alternativas de código abierto. Con variables dinámicas, carga masiva de datos y comparación de resultados en paralelo, agiliza el flujo de trabajo para desarrolladores y creadores de contenido para construir aplicaciones de IA de alta calidad y rentables.

Bolt Foundry proporciona herramientas de código abierto para que los desarrolladores realicen pruebas unitarias en Modelos de Lenguaje Grandes (LLMs). Transforma la ingeniería de prompts en un proceso científico y basado en datos mediante el uso de prompts estructurados y comprobables llamados 'graders'. Esto garantiza resultados de IA fiables, consistentes y medibles, lo que lo hace ideal para construir aplicaciones de nivel de producción.

Lakera es una plataforma de seguridad nativa de IA diseñada para proteger las aplicaciones de IA Generativa contra amenazas como la inyección de prompts, la fuga de datos y las violaciones de cumplimiento. Ofrece protección en tiempo de ejecución, inteligencia de amenazas continua impulsada por el equipo de red teaming de IA más grande del mundo y una fácil integración con una sola línea de código. Con la confianza de empresas como Dropbox, Lakera asegura agentes y aplicaciones de IA en todos los principales modelos e idiomas con una latencia ultrabaja.

ArtisMind es una plataforma de ingeniería de prompts de IA de nivel empresarial diseñada para construir, puntuar y perfeccionar prompts de IA utilizando inteligencia multi-modelo basada en datos. Ofrece un flujo de trabajo científico de 5 etapas para crear prompts listos para producción, seguros y optimizados para varios modelos de IA, abordando desafíos como la inyección de prompts, las alucinaciones y la calidad inconsistente.

Codegate es un gateway de seguridad de código abierto y un marco de multiplexación para sistemas de agentes de IA. Desarrollado por Stacklok, proporciona espacios de trabajo seguros y control de acceso basado en políticas, permitiendo a los desarrolladores construir y gestionar aplicaciones complejas de múltiples agentes de forma segura y eficiente.

Learn Prompting es una plataforma educativa líder que ofrece cursos completos y respaldados por investigación sobre ingeniería de prompts y comunicación con IA. Con la confianza de más de 3 millones de usuarios y grandes corporaciones, proporciona formación gratuita y de pago para todos los niveles, desde principiantes hasta expertos avanzados, incluyendo temas especializados como seguridad de IA y red-teaming.

Ragas es un framework de Python de código abierto para evaluar y probar pipelines de Generación Aumentada por Recuperación (RAG). Proporciona un conjunto de métricas para medir el rendimiento de tus aplicaciones LLM, desde la recuperación de contexto hasta la generación de respuestas. Con la confianza de líderes de la industria como LangChain y LlamaIndex, Ragas ayuda a los desarrolladores a construir sistemas de IA más robustos, fiables y precisos, identificando y mitigando problemas como alucinaciones y respuestas irrelevantes.

getmaxim es una plataforma integral de evaluación y observabilidad de GenAI diseñada para equipos de desarrollo de IA. Permite a los usuarios probar, monitorear y mejorar aplicaciones de IA ejecutando evaluaciones exhaustivas en LLMs y pipelines RAG, automatizando pruebas y proporcionando monitoreo de producción en tiempo real para garantizar una IA de alta calidad, confiable y responsable.

Charm es un ecosistema de herramientas y bibliotecas de código abierto diseñado para hacer que la interfaz de línea de comandos (CLI) sea glamorosa y potente. Proporciona a los desarrolladores aplicaciones para codificación impulsada por IA (Crush, Mods), hermosas interfaces de usuario de terminal (Bubble Tea), renderizado de markdown (Glow) y servidores Git autohospedados (Soft Serve). Charm permite a los desarrolladores construir, estilizar y mejorar sus flujos de trabajo en la terminal con herramientas modernas, elegantes y altamente funcionales.