llm-obs-trace-rca

Datadog Audit TrailからSOC 2およびPCI DSSに対応した監査対応のコンプライアンス証跡を生成します。フレームワークのコントロールを特定のクエリパターンにマッピングし、…

LLM実験結果を分析します。単一または比較実験、探索的またはQ&Aモードに対応します。ユーザーが「実験を分析」「比較…」と言った場合に使用します。

ログ管理 - 検索、パイプライン、アーカイブ、およびコスト管理。

モニター管理 - 作成、更新、ミュート、およびアラートのベストプラクティス。

Datadogの製品使用量やコストの急増を調査するために、使用量計測データ（いつ、何が急増したか）と監査証跡の設定変更（誰が何を変更したか）を関連付けます。

潜在的に侵害されたDatadog APIキーを調査 — アクションのタイムライン、地理/IPの内訳、呼び出されたエンドポイント、異常フラグ、および修復手順。

本番LLMトレースの根本原因分析を、評価判定結果をシグナルとして実施します。ユーザーのアプリケーションが失敗している理由を診断します。ユーザーが「eval…」と言った場合に使用します。

Datadogのセットアップやインストルメンテーションを行う前に、ユーザーが正しいリージョンで認証済みのDatadogアカウントと有効なDD_API_KEYを持っていることを確認します。既存の...を検出します。