Show HN: Evaluation Context Protocol (ECP)
Show HN: Evaluation Context Protocol(ECP)——AIエージェント向けのポータブル評価プロトコル。ECPは、フレームワーク、モデル、評価プラットフォーム、CIシステムを横断して、エージェントの出力、ツール呼び出し、評価者が可視化できる監査コンテキストをテストするためのベンダーニュートラルなプロトコルです。
背景メモ
ECP(Evaluation Context Protocol)は、AIエージェントの評価を標準化するためのベンダー中立なプロトコル。2025年に登場したもので、Agent-to-Agent Protocol(A2A)やModel Context Protocol(MCP)など、AIエージェント間の通信やツール連携を標準化する動きが加速する中、その「評価」部分に着目した位置づけ。
- MCP(モデルとツールの接続)やA2A(エージェント同士の通信)に対して、ECPはエージェントの出力やツール呼び出しを「どう評価・テストするか」を定義するレイヤー。
- 従来は各フレームワーク(LangChain, CrewAIなど)や各評価プラットフォームごとにバラバラだった評価手法を、共通プロトコルで統一しようという試み。
- CI/CDパイプラインに組み込める点が特徴で、「プロンプトの変更がエージェントの振る舞いに与える影響を自動テストする」といった使い方が想定されている。