📢 X投稿文
AIエージェントの本番トレースから回帰テストが自動生成。失敗検出→クラスタリング→再現ケース化→CIゲート→アラートまで、一貫したTrace-native CI/CDで本番品質を確保します。
https://github.com/Jwuthri/Tracely-ai
🤖 AI考察
■ **概要**
本番AI Agentのトレースを自動キャッチし、失敗を再現可能なテストへ冷凍化してCI/CDのゲートに組み込む、トレース駆動型のエージェント品質管理システム。
■ **特徴・用途**
- **トレース→テスト化の自動パイプライン**: 本番失敗をそのまま回帰テスト化し、同じ不具合の再出荷を防ぐ(従来は手作業でテストケース化、難しい)。
- **失敗の密度ベースの自動クラスタリング**: バラバラの失敗パターンを自動分類し、根本の問題を可視化。
- **セルフホスト構成**: API・worker・UI・DB一式をRailwayで1ボタン展開可能(SaaS依存回避、エアギャップOK)。
■ **結論**
Agentは確定的でなく本番での予期しない失敗が頻発するため、このフロー(失敗の即座の固有化・自動テスト化・ブロック)はAgent CI/CDの実用性を大幅に向上させるが、トレース品質とクラスタリングロジックの精度が採用判定の要。