Skip to content
TopicTracker
出典 HackerNews原文を表示
翻訳言語翻訳言語

Show HN: Mirrors – test AI agent changes by replaying real production traces

Mirrors is a tool that allows developers to test changes to AI agents by replaying real production traces instead of using synthetic data. This approach helps validate modifications in a realistic environment before deployment, reducing risks and improving reliability of AI agent updates.

背景メモ

- **Mirrors**(RunMirrors.com)は、本番環境の実際のトラフィックトレースをキャプチャし、それを**リプレイ**することでAIエージェントやコード変更の影響を安全にテストできるツール。Show HN(Hacker Newsへの自主出品)として公開された。 - 従来のステージング環境では「本番そっくり」なテストが難しいが、本番トラフィックをそのまま"鏡"のように再生することで、**副作用のない再現可能なテスト**を実現する。 - **AIエージェント**(自律的にタスクを実行するプログラム)の分野では、変更を加えたときに予期せぬ動作が発生しやすい。Mirrorsは過去の入出力を基に変更後も同じ動作をするか検証できる。 - 概念的には**Replay Testing**(再生テスト)の一種で、PosthogやRecord & Replayといった既存ツールと似たアプローチだが、特に**AIエージェントの変更検証**に特化している点が特徴。

関連記事