Tropir

Parea AIは、LLMアプリケーションを開発、テスト、監視するためのエンドツーエンドのプラットフォームです。実験追跡、可観測性、評価、人間による注釈ツールを提供し、チームが自信を持ってAIシステムを本番環境に展開できるよう支援します。

Langfuseは、LLMアプリケーションのデバッグ、評価、改善のための包括的なツールを提供するオープンソースのLLMエンジニアリングプラットフォームです。トレーシング、プロンプト管理、評価フレームワーク、メトリクスなどの機能を提供し、大規模言語モデルで構築するチームの開発ライフサイクル全体を合理化します。

Braintrustは、堅牢なLLMアプリケーションを開発、評価、展開するためのエンドツーエンドのプラットフォームです。プロンプトエンジニアリング、モデル評価、リアルタイムトレース、本番監視のための包括的なツールスイートを提供します。技術者と非技術者の両方のチームメンバー向けに設計されており、AI開発ライフサイクルを合理化し、AI製品の信頼性、有効性、本番準備を確実にします。

Vellum AIは、ミッションクリティカルなAIエージェントとアプリケーションを構築、評価、展開するためのエンドツーエンドのエンタープライズプラットフォームです。オーケストレーション、プロンプトエンジニアリング、RAG、評価、モニタリングのための統一環境を提供し、チームが信頼性の高いAIソリューションを10倍速く構築できるようにします。

Freeplayは、AIチームがAI製品やエージェントを構築、テスト、継続的に改善するために設計されたエンタープライズ対応のプラットフォームです。プロンプト管理、実験、LLMの可観測性、データレビューを単一のワークフローに統合し、製品品質と開発速度を加速させる強力なデータフライホイールを創出します。

LangWatchは、LLMアプリケーションを監視、評価、最適化するためのオールインワンのオープンソースプラットフォームです。シミュレートされたユーザー環境を通じてAIエージェントのテストに特化しており、チームが本番前にリグレッションやエッジケースを検出するのに役立ちます。このプラットフォームは、可観測性、評価、最適化、ガードレールを組み合わせ、AIアプリケーションの信頼性、安全性、パフォーマンスを保証します。

Parea AIは、LLMアプリケーションを開発、テスト、監視するためのエンドツーエンドのプラットフォームです。実験追跡、可観測性、評価、人間による注釈ツールを提供し、チームが自信を持ってAIシステムを本番環境に展開できるよう支援します。

Langfuseは、LLMアプリケーションのデバッグ、評価、改善のための包括的なツールを提供するオープンソースのLLMエンジニアリングプラットフォームです。トレーシング、プロンプト管理、評価フレームワーク、メトリクスなどの機能を提供し、大規模言語モデルで構築するチームの開発ライフサイクル全体を合理化します。

Braintrustは、堅牢なLLMアプリケーションを開発、評価、展開するためのエンドツーエンドのプラットフォームです。プロンプトエンジニアリング、モデル評価、リアルタイムトレース、本番監視のための包括的なツールスイートを提供します。技術者と非技術者の両方のチームメンバー向けに設計されており、AI開発ライフサイクルを合理化し、AI製品の信頼性、有効性、本番準備を確実にします。

Pydanticは開発者向けの包括的なプラットフォームで、強力なデータバリデーション、AI開発ツール、フルスタックのオブザーバビリティソリューションを提供します。型ヒントを活用して実行時データバリデーションを行い、ローカル開発から本番環境までの深い洞察を提供することで、Pythonやその他の言語でのより迅速で堅牢なアプリケーション開発を可能にします。

Heliconeは、開発者向けのオープンソースプラットフォームで、AIゲートウェイとLLMオブザーバビリティを提供します。LLMの使用状況をルーティング、監視、デバッグ、分析するツールを提供し、信頼性の高いAIアプリケーションの構築を支援します。主な機能には、100以上のモデルに対応した統一API、インテリジェントなキャッシュ、レート制限、プロンプト管理、詳細なパフォーマンス分析が含まれます。

FutureAGIは、企業や開発者向けに設計された包括的なLLM可観測性および評価プラットフォームです。AIアプリケーションの構築、評価、改善を支援し、最大99%の精度を達成します。合成データ生成、ノーコード実験、マルチモーダル評価、リアルタイムの本番監視ツールを提供します。

HoneyHiveは、LLMとAIエージェントを構築する開発者向けのオールインワンAIオブザーバビリティ＆評価プラットフォームです。初期の実験からエンタープライズ規模のデプロイまで、AIアプリケーションの構築、テスト、デバッグ、監視を行うための統一ソリューションを提供します。このプラットフォームは、チームが体系的にAIの品質を測定し、エージェントの相互作用に対する深い可視性を得て、コストやレイテンシなどのパフォーマンスメトリクスを監視し、プロンプトやデータセットなどの重要なアセットで共同作業を行うことで、信頼性の高いAI製品を自信を持って出荷できるよう支援します。

MetoroはKubernetes向けに設計されたAI搭載のオブザーバビリティプラットフォームです。eBPF技術を利用してゼロインストルメンテーションのモニタリングを実現し、問題の自律的な検出、根本原因分析、プルリクエストによるコード修正の自動化を可能にします。1分未満で運用開始でき、従来の監視ツールに代わる包括的でコスト効率の高い選択肢を提供します。

Metorialは、AIエージェント向けの統合プラットフォームであり、開発者が強力なエージェントAIアプリケーションを迅速に構築、デプロイ、監視できるようにします。サーバーレスのモデルコンテキストプロトコル（MCP）プラットフォームを介して、数百のツール、データソース、APIにシームレスに接続し、スケーラブルなAIソリューションのための堅牢なSDK、可観測性、エンタープライズグレードのセキュリティを提供します。

Keywords AIは、AIスタートアップと開発者向けに設計された包括的なLLMオブザーバビリティ＆モニタリングプラットフォームです。統一されたAPIを提供し、LLMワークフローのデプロイ、テスト、監視、最適化を行い、200以上のモデルをサポートします。簡単な2行のコード統合により、チームが信頼性の高いAI機能をより迅速に構築・提供できるよう支援します。

Atla AIは、AIエージェント向けに設計されたオブザーバビリティ（可観測性）および評価プラットフォームです。エージェントの振る舞いに関する深い洞察を提供し、開発者がエージェントの障害を発見、理解、修正するのを支援します。このプラットフォームは、エラーを自動検出し、繰り返し発生するパターンを特定し、エージェントのパフォーマンスと完了率を継続的に向上させるための実用的な提案を行います。

Valyr（旧Helicone）は、オープンソースのLLM可観測性プラットフォームおよびAIゲートウェイです。開発者がAIアプリケーションを監視、デバッグ、分析するのを支援し、単一の統合で100以上のモデルにアクセスし、コストを管理し、キャッシングやレート制限などの機能で信頼性を向上させます。

fixaは、AI音声エージェント専用に設計されたオープンソースのオブザーバビリティプラットフォームです。遅延、割り込み、会話の正確性などの主要なメトリクスを追跡し、開発者が音声AIを監視、デバッグ、改善して高品質なユーザーエクスペリエンスを確保するのを支援します。