Laminar

HoneyHiveは、LLMとAIエージェントを構築する開発者向けのオールインワンAIオブザーバビリティ＆評価プラットフォームです。初期の実験からエンタープライズ規模のデプロイまで、AIアプリケーションの構築、テスト、デバッグ、監視を行うための統一ソリューションを提供します。このプラットフォームは、チームが体系的にAIの品質を測定し、エージェントの相互作用に対する深い可視性を得て、コストやレイテンシなどのパフォーマンスメトリクスを監視し、プロンプトやデータセットなどの重要なアセットで共同作業を行うことで、信頼性の高いAI製品を自信を持って出荷できるよう支援します。

Langfuseは、LLMアプリケーションのデバッグ、評価、改善のための包括的なツールを提供するオープンソースのLLMエンジニアリングプラットフォームです。トレーシング、プロンプト管理、評価フレームワーク、メトリクスなどの機能を提供し、大規模言語モデルで構築するチームの開発ライフサイクル全体を合理化します。

Heliconeは、開発者向けのオープンソースプラットフォームで、AIゲートウェイとLLMオブザーバビリティを提供します。LLMの使用状況をルーティング、監視、デバッグ、分析するツールを提供し、信頼性の高いAIアプリケーションの構築を支援します。主な機能には、100以上のモデルに対応した統一API、インテリジェントなキャッシュ、レート制限、プロンプト管理、詳細なパフォーマンス分析が含まれます。

Braintrustは、堅牢なLLMアプリケーションを開発、評価、展開するためのエンドツーエンドのプラットフォームです。プロンプトエンジニアリング、モデル評価、リアルタイムトレース、本番監視のための包括的なツールスイートを提供します。技術者と非技術者の両方のチームメンバー向けに設計されており、AI開発ライフサイクルを合理化し、AI製品の信頼性、有効性、本番準備を確実にします。

LangWatchは、LLMアプリケーションを監視、評価、最適化するためのオールインワンのオープンソースプラットフォームです。シミュレートされたユーザー環境を通じてAIエージェントのテストに特化しており、チームが本番前にリグレッションやエッジケースを検出するのに役立ちます。このプラットフォームは、可観測性、評価、最適化、ガードレールを組み合わせ、AIアプリケーションの信頼性、安全性、パフォーマンスを保証します。

Langfuseは、LLMアプリケーションのデバッグ、評価、改善のための包括的なツールを提供するオープンソースのLLMエンジニアリングプラットフォームです。トレーシング、プロンプト管理、評価フレームワーク、メトリクスなどの機能を提供し、大規模言語モデルで構築するチームの開発ライフサイクル全体を合理化します。

HoneyHiveは、LLMとAIエージェントを構築する開発者向けのオールインワンAIオブザーバビリティ＆評価プラットフォームです。初期の実験からエンタープライズ規模のデプロイまで、AIアプリケーションの構築、テスト、デバッグ、監視を行うための統一ソリューションを提供します。このプラットフォームは、チームが体系的にAIの品質を測定し、エージェントの相互作用に対する深い可視性を得て、コストやレイテンシなどのパフォーマンスメトリクスを監視し、プロンプトやデータセットなどの重要なアセットで共同作業を行うことで、信頼性の高いAI製品を自信を持って出荷できるよう支援します。

Braintrustは、堅牢なLLMアプリケーションを開発、評価、展開するためのエンドツーエンドのプラットフォームです。プロンプトエンジニアリング、モデル評価、リアルタイムトレース、本番監視のための包括的なツールスイートを提供します。技術者と非技術者の両方のチームメンバー向けに設計されており、AI開発ライフサイクルを合理化し、AI製品の信頼性、有効性、本番準備を確実にします。

Parea AIは、LLMアプリケーションを開発、テスト、監視するためのエンドツーエンドのプラットフォームです。実験追跡、可観測性、評価、人間による注釈ツールを提供し、チームが自信を持ってAIシステムを本番環境に展開できるよう支援します。

Teammatelyは、AIエンジニア向けの高度なAIエージェントプラットフォームです。プロンプト生成やRAG構築から、多次元評価、本番環境のオブザーバビリティまで、AI開発ライフサイクル全体を自動化・高速化します。失敗しにくい、信頼性が高くスケーラブルで安全なAIアプリケーションを、わずかな時間で構築します。

Valyr（旧Helicone）は、オープンソースのLLM可観測性プラットフォームおよびAIゲートウェイです。開発者がAIアプリケーションを監視、デバッグ、分析するのを支援し、単一の統合で100以上のモデルにアクセスし、コストを管理し、キャッシングやレート制限などの機能で信頼性を向上させます。

Heliconeは、開発者向けのオープンソースプラットフォームで、AIゲートウェイとLLMオブザーバビリティを提供します。LLMの使用状況をルーティング、監視、デバッグ、分析するツールを提供し、信頼性の高いAIアプリケーションの構築を支援します。主な機能には、100以上のモデルに対応した統一API、インテリジェントなキャッシュ、レート制限、プロンプト管理、詳細なパフォーマンス分析が含まれます。

Pydanticは開発者向けの包括的なプラットフォームで、強力なデータバリデーション、AI開発ツール、フルスタックのオブザーバビリティソリューションを提供します。型ヒントを活用して実行時データバリデーションを行い、ローカル開発から本番環境までの深い洞察を提供することで、Pythonやその他の言語でのより迅速で堅牢なアプリケーション開発を可能にします。

MLflowは、エンドツーエンドの機械学習ライフサイクルを管理するためのオープンソースプラットフォームです。開発者やデータサイエンティストが実験を追跡し、コードを再現可能な実行形式にパッケージ化し、モデルをバージョン管理して共有し、本番環境にデプロイすることを可能にし、従来のMLと最新のGenAIアプリケーションの両方をサポートします。

Orq.aiは、ソフトウェアチームがLLMアプリケーションをプロトタイプから本番環境へとスケールさせるために設計された、エンドツーエンドの生成AIコラボレーションプラットフォームです。実験、デプロイ、可観測性のためのツールを提供し、チームが自信を持ってエージェント型AIシステムを構築、監視、最適化できるようにします。

Latitudeは、大規模言語モデル（LLM）を活用したアプリケーションの構築、評価、展開のために設計されたオープンソースの開発プラットフォームであり、特に自律型AIエージェントの作成に重点を置いています。開発者がAIソリューションを実験、改良、拡張するための包括的なツール群を提供します。

Prompt Mixerは、チーム向けの共同作業ワークスペースを提供する、強力なオープンソースのプロンプトエンジニアリングツールです。ユーザーはプロンプトチェーンを管理し、異なるLLMを比較し、高度な評価指標を活用して、AI搭載ソリューションの作成、テスト、評価、展開ができます。

LangWatchは、LLMアプリケーションを監視、評価、最適化するためのオールインワンのオープンソースプラットフォームです。シミュレートされたユーザー環境を通じてAIエージェントのテストに特化しており、チームが本番前にリグレッションやエッジケースを検出するのに役立ちます。このプラットフォームは、可観測性、評価、最適化、ガードレールを組み合わせ、AIアプリケーションの信頼性、安全性、パフォーマンスを保証します。

Langtraceは、AIエージェントおよびLLMアプリケーション向けのオープンソースのオブザーバビリティ（可観測性）および評価プラットフォームです。開発者がパフォーマンスを監視、デバッグ、改善するのを支援し、トレーシング、プロンプト管理、堅牢なセキュリティなどの機能でAIプロトタイプをエンタープライズグレードの製品に変革します。