Prompto

promptfoo es un marco completo de pruebas y evaluación para Modelos de Lenguaje Grandes (LLM). Ayuda a desarrolladores y empresas a comparar la calidad de los prompts, evaluar el rendimiento de los modelos y mejorar la seguridad de la IA mediante pruebas sistemáticas, benchmarking y red teaming impulsado por IA. Soporta más de 50 proveedores de LLM, incluidos modelos locales, y ofrece una CLI amigable para desarrolladores para una integración perfecta en los flujos de trabajo de desarrollo.

Bolt Foundry proporciona herramientas de código abierto para que los desarrolladores realicen pruebas unitarias en Modelos de Lenguaje Grandes (LLMs). Transforma la ingeniería de prompts en un proceso científico y basado en datos mediante el uso de prompts estructurados y comprobables llamados 'graders'. Esto garantiza resultados de IA fiables, consistentes y medibles, lo que lo hace ideal para construir aplicaciones de nivel de producción.

Una plataforma de ingeniería de prompts impulsada por IA, diseñada para ayudar a los usuarios a crear, refinar y optimizar prompts para grandes modelos de lenguaje (LLMs). Mejora la claridad, el contexto y la estructura del prompt para generar resultados de IA superiores, más precisos y consistentes para diversas tareas.

CrayEye es una herramienta de IA multimodal, gratuita y de código abierto, que te permite crear y compartir prompts de visión enriquecidos con el contexto del mundo real de los sensores de tu dispositivo (como cámara, GPS) y APIs (como el clima). Experimenta con modelos visuales para interpretar tu entorno de formas nuevas y conscientes del contexto.

Redmo es una potente plataforma de ingeniería de prompts que permite a los usuarios crear, gestionar y ejecutar plantillas de prompt dinámicas con variables. Ofrece soporte de API para una integración perfecta y cuenta con compatibilidad con múltiples LLMs, incluido GPT-4, para agilizar y escalar la generación de contenido y los flujos de trabajo automatizados.

Prompt Refine es una potente plataforma para la ingeniería de prompts, que permite a desarrolladores e investigadores realizar experimentos sistemáticos. Ayuda a probar, comparar, versionar y organizar prompts para diversos LLMs como OpenAI y Anthropic, agilizando el proceso de optimización y mejorando la calidad de los resultados del modelo.

ModelFusion es un kit de herramientas LLM todo en uno para desarrolladores e investigadores. Ofrece un conjunto de herramientas gratuitas, incluyendo una calculadora de costos, una biblioteca de prompts y un comparador de modelos para más de 30 modelos de IA como GPT-4, Claude y Gemini. También proporciona una API unificada y guías para ejecutar modelos localmente para agilizar el desarrollo de IA y optimizar costos.

Prompt Mixer es una potente herramienta de código abierto para la ingeniería de prompts, que proporciona un espacio de trabajo colaborativo para equipos. Permite a los usuarios crear, probar, evaluar e implementar soluciones impulsadas por IA gestionando cadenas de prompts, comparando diferentes LLMs y utilizando métricas de evaluación avanzadas.

Backmesh es un Backend como Servicio (BaaS) de código abierto diseñado para aplicaciones de IA. Actúa como un Gateway de API de LLM seguro, permitiendo a los desarrolladores llamar a APIs de LLM como OpenAI y Gemini directamente desde aplicaciones web o móviles sin exponer claves privadas. Ofrece características como autenticación JWT, limitación de tasa por usuario y análisis integrados para gestionar y monitorear el uso de la API de manera efectiva.

Trainkore es una plataforma unificada para que los desarrolladores optimicen las operaciones de LLM. Automatiza la generación de prompts, cambia dinámicamente entre modelos de IA como GPT-4o y Gemini para reducir costos hasta en un 85%, y proporciona una suite de observabilidad completa para el monitoreo del rendimiento y la depuración. Simplifica la integración y mejora el desarrollo de aplicaciones de IA.

promptfoo es un marco completo de pruebas y evaluación para Modelos de Lenguaje Grandes (LLM). Ayuda a desarrolladores y empresas a comparar la calidad de los prompts, evaluar el rendimiento de los modelos y mejorar la seguridad de la IA mediante pruebas sistemáticas, benchmarking y red teaming impulsado por IA. Soporta más de 50 proveedores de LLM, incluidos modelos locales, y ofrece una CLI amigable para desarrolladores para una integración perfecta en los flujos de trabajo de desarrollo.

Bolt Foundry proporciona herramientas de código abierto para que los desarrolladores realicen pruebas unitarias en Modelos de Lenguaje Grandes (LLMs). Transforma la ingeniería de prompts en un proceso científico y basado en datos mediante el uso de prompts estructurados y comprobables llamados 'graders'. Esto garantiza resultados de IA fiables, consistentes y medibles, lo que lo hace ideal para construir aplicaciones de nivel de producción.

LobeHub es una plataforma de IA todo en uno que te permite construir y gestionar un equipo personalizado de Agentes de IA. Ofrece una experiencia de usuario superior a las interfaces LLM estándar como ChatGPT, con soporte para numerosos modelos, plugins e interacciones multimodales. Crea, comparte y utiliza agentes especializados para tareas que van desde la codificación y la escritura hasta la investigación académica y la vida diaria, todo dentro de una única e intuitiva interfaz de chat.

Langfuse es una plataforma de ingeniería de LLM de código abierto que proporciona herramientas completas para depurar, evaluar y mejorar aplicaciones de LLM. Ofrece funciones como trazabilidad, gestión de prompts, marcos de evaluación y métricas para agilizar todo el ciclo de vida de desarrollo para equipos que construyen con grandes modelos de lenguaje.

Continue es un asistente de código de IA de código abierto y personalizable para VS Code y JetBrains. Mejora la productividad del desarrollador con autocompletado inteligente, chat consciente del contexto y refactorización en línea, soportando cualquier LLM, incluidos modelos locales y on-premise para máxima privacidad y control.

Latitude es una plataforma de desarrollo de código abierto diseñada para construir, evaluar y desplegar aplicaciones impulsadas por Modelos Lingüísticos Grandes (LLM), con un enfoque especial en la creación de agentes de IA autónomos. Proporciona un conjunto completo de herramientas para que los desarrolladores experimenten, refinen y escalen sus soluciones de IA.

Chainlit es un framework de Python de código abierto para que los desarrolladores construyan y desplieguen rápidamente aplicaciones de IA conversacional listas para producción. Proporciona una interfaz de chat instantánea y personalizable, permitiéndote centrarte en tu lógica de backend y en las interacciones con LLMs. Con integraciones profundas para LangChain, LlamaIndex y los principales proveedores de LLM, Chainlit simplifica la creación de todo, desde chatbots simples hasta copilotos complejos basados en datos.

APIPark es un gateway de IA de código abierto y un portal para desarrolladores diseñado para ayudar a las empresas a gestionar, integrar y desplegar servicios de IA de forma eficiente. Centraliza las llamadas a LLM, reduce costes y proporciona herramientas para compartir, monitorizar y securizar APIs.

boundaryml (BAML) es un lenguaje de programación y un conjunto de herramientas especializado para que los desarrolladores extraigan datos estructurados de Modelos de Lenguaje Grandes (LLMs) de forma fiable. Transforma la compleja ingeniería de prompts en un proceso simplificado, similar al código, garantizando salidas con seguridad de tipos y corrección de errores en diversos LLMs y lenguajes de programación como Python y TypeScript. Está diseñado para mejorar la fiabilidad, reducir costes y acelerar los ciclos de desarrollo de aplicaciones de IA.