Langtrace

Langfuseは、LLMアプリケーションのデバッグ、評価、改善のための包括的なツールを提供するオープンソースのLLMエンジニアリングプラットフォームです。トレーシング、プロンプト管理、評価フレームワーク、メトリクスなどの機能を提供し、大規模言語モデルで構築するチームの開発ライフサイクル全体を合理化します。

HoneyHiveは、LLMとAIエージェントを構築する開発者向けのオールインワンAIオブザーバビリティ＆評価プラットフォームです。初期の実験からエンタープライズ規模のデプロイまで、AIアプリケーションの構築、テスト、デバッグ、監視を行うための統一ソリューションを提供します。このプラットフォームは、チームが体系的にAIの品質を測定し、エージェントの相互作用に対する深い可視性を得て、コストやレイテンシなどのパフォーマンスメトリクスを監視し、プロンプトやデータセットなどの重要なアセットで共同作業を行うことで、信頼性の高いAI製品を自信を持って出荷できるよう支援します。

Laminarは、信頼性の高いAIアプリケーションを構築する開発者向けに設計された、オープンソースのオブザーバビリティ（可観測性）および評価プラットフォームです。LLM搭載システムのトレース、評価、デバッグのための包括的なツールを提供します。リアルタイムトレース、ブラウザエージェントのオブザーバビリティ、インタラクティブなプレイグラウンド、統合されたデータセット管理などの主要機能を備え、開発から本番までのMLOpsライフサイクル全体を簡素化します。

PostHogは、開発者向けのオールインワン・オープンソース製品分析プラットフォームです。製品分析、セッションリプレイ、機能フラグ、A/Bテストを単一のツールに統合し、断片化されたデータスタックの必要性をなくします。ユーザーの行動を理解し、より良い製品をより速く構築するのを支援するために設計されています。

OpenReplayは、自己ホスティング可能なオープンソースのセッションリプレイ＆プロダクト分析スイートです。チームがユーザー行動を理解し、バグを迅速に再現し、デジタル体験を最適化するのを支援します。コンソールログやネットワークアクティビティなどの技術データと共に視覚的なコンテキストを提供することで、エンジニア、プロダクトマネージャー、サポートチームがフリクションを特定し、コンバージョンファネルを改善し、顧客データの完全な制御を維持しながら全体的な製品の使いやすさを向上させるのに役立ちます。

Langfuseは、LLMアプリケーションのデバッグ、評価、改善のための包括的なツールを提供するオープンソースのLLMエンジニアリングプラットフォームです。トレーシング、プロンプト管理、評価フレームワーク、メトリクスなどの機能を提供し、大規模言語モデルで構築するチームの開発ライフサイクル全体を合理化します。

Ragasは、検索拡張生成（RAG）パイプラインを評価・テストするためのオープンソースPythonフレームワークです。コンテキスト検索から回答生成まで、LLMアプリケーションのパフォーマンスを測定するための一連のメトリクスを提供します。LangChainやLlamaIndexなどの業界リーダーから信頼されており、幻覚や無関係な応答といった問題を特定・軽減することで、開発者がより堅牢で信頼性の高い、正確なAIシステムを構築するのを支援します。

Heliconeは、開発者向けのオープンソースプラットフォームで、AIゲートウェイとLLMオブザーバビリティを提供します。LLMの使用状況をルーティング、監視、デバッグ、分析するツールを提供し、信頼性の高いAIアプリケーションの構築を支援します。主な機能には、100以上のモデルに対応した統一API、インテリジェントなキャッシュ、レート制限、プロンプト管理、詳細なパフォーマンス分析が含まれます。

Agentaは、チームが信頼性の高いLLMアプリケーションを構築するために設計されたオープンソースのLLMOpsプラットフォームです。プロンプト管理、体系的な評価、可観測性を単一の共同ワークフローに統合し、開発者、プロダクトマネージャー、ドメイン専門家が散在したプロセスから構造化された開発へと移行するのを支援します。

HoneyHiveは、LLMとAIエージェントを構築する開発者向けのオールインワンAIオブザーバビリティ＆評価プラットフォームです。初期の実験からエンタープライズ規模のデプロイまで、AIアプリケーションの構築、テスト、デバッグ、監視を行うための統一ソリューションを提供します。このプラットフォームは、チームが体系的にAIの品質を測定し、エージェントの相互作用に対する深い可視性を得て、コストやレイテンシなどのパフォーマンスメトリクスを監視し、プロンプトやデータセットなどの重要なアセットで共同作業を行うことで、信頼性の高いAI製品を自信を持って出荷できるよう支援します。

Laminarは、信頼性の高いAIアプリケーションを構築する開発者向けに設計された、オープンソースのオブザーバビリティ（可観測性）および評価プラットフォームです。LLM搭載システムのトレース、評価、デバッグのための包括的なツールを提供します。リアルタイムトレース、ブラウザエージェントのオブザーバビリティ、インタラクティブなプレイグラウンド、統合されたデータセット管理などの主要機能を備え、開発から本番までのMLOpsライフサイクル全体を簡素化します。

Zedは、Rustでゼロから構築された、高性能で協調的なAI搭載のコードエディタです。速度と効率性を追求して設計されており、リアルタイムコラボレーション、エージェント編集のためのLLMとの緊密な統合、デバッガやネイティブGitサポートを含む包括的な組み込みツールセットを提供します。Zedはオープンソースで、macOSとLinuxで利用可能、Windowsサポートも間もなく開始されます。

Pydanticは開発者向けの包括的なプラットフォームで、強力なデータバリデーション、AI開発ツール、フルスタックのオブザーバビリティソリューションを提供します。型ヒントを活用して実行時データバリデーションを行い、ローカル開発から本番環境までの深い洞察を提供することで、Pythonやその他の言語でのより迅速で堅牢なアプリケーション開発を可能にします。

PromptLayerは、AIエンジニアリングのための包括的なワークベンチであり、プロンプト管理、評価、LLMオブザーバビリティのための統一プラットフォームを提供します。チームがすべてのプロンプトとエージェントのバージョン管理、テスト、監視を可能にし、技術者と非技術者の協力関係を促進して、本番環境に対応したAIアプリケーションを効率的に構築・拡張します。

CopilotKitは、開発者がアプリ内AIコパイロットやエージェントアプリケーションを構築、デプロイ、カスタマイズするためのオープンソースのフルスタックフレームワークです。フロントエンドコンポーネント、バックエンドロジック、そしてあらゆるLLMやエージェントフレームワークとのシームレスな統合を提供し、強力なユーザー向けAIアシスタントの作成を可能にします。

Chainlitは、開発者が本番環境対応の対話型AIアプリケーションを迅速に構築・デプロイするためのオープンソースPythonフレームワークです。カスタマイズ可能なチャットインターフェースを即座に提供し、バックエンドロジックとLLMの連携に集中できます。LangChainやLlamaIndex、主要なLLMプロバイダーとの緊密な統合により、シンプルなチャットボットから複雑なデータ駆動型コパイロットまで簡単に作成できます。

Klavisは、オープンソースのモデルコンテキストプロトコル（MCP）統合を提供する開発者プラットフォームで、AIアプリケーションがSalesforce、Gmail、Slackなどの数千の外部ツールやAPIと安全かつスケーラブルに接続できるようにします。認証を簡素化し、セキュリティを強化し、強力なAIエージェントの開発を加速します。

MyScaleは、ベクトル検索と強力なSQLの機能を独自に組み合わせた高性能なベクトルデータベースです。RAG、セマンティック検索、推薦システムなどの高度なAIアプリケーションの構築用に設計されており、開発者が単一の使い慣れたインターフェースを使用してベクトルと構造化データに対するハイブリッドクエリを実行できるようにすることで、技術スタックを簡素化します。

GPT Researcherは、迅速かつ詳細なリサーチのために設計されたオープンソースの自律型AIエージェントです。信頼できる情報源からの情報収集、調査結果の整理、引用付きの包括的なレポート作成まで、リサーチプロセス全体を自動化します。開発者、アナリスト、研究者に最適で、あらゆるLLMや検索エンジンと統合し、どんなトピックについても数分で正確かつ事実に基づいた結果を提供します。