experiment-analyzer
от datadog-labs
Анализировать результаты экспериментов LLM. Обрабатывает одиночные или сравнительные эксперименты, исследовательский режим или режим вопросов-ответов. Используйте, когда пользователь говорит «проанализировать эксперимент», «сравнить…»
npx skills add https://github.com/datadog-labs/agent-skills --skill experiment-analyzerБольше skills от datadog-labs
dd-audit
datadog-labs
Расследования журнала аудита — кто что изменил, компрометация ключей, первопричина скачка затрат, доказательства соответствия (SOC 2/PCI) и аудит активности ИИ.
official
agent-install
datadog-labs
Установите Datadog Agent на Kubernetes с помощью Datadog Operator — необходимо перед включением Single Step Instrumentation (SSI), которая автоматически…
official
agent-observability-auto-experiment
datadog-labs
Запустите итеративный подъём по улучшению кода на реальных данных Datadog LLM-Obs, локально, с Claude Code в качестве агента. Устанавливает базовую оценку, делает один…
official
agent-observability-eval-bootstrap
datadog-labs
Инициализировать оценщики на основе производственных трассировок — по умолчанию предлагать онлайн-оценщики LLM-judge и, после вашего подтверждения, создавать их в Datadog как отключенные черновики…
official
agent-observability-eval-pipeline
datadog-labs
Сквозной конвейер наблюдаемости агентов для инструментированного ml_app — классификация производственных трасс, анализ первопричин отказов, запуск оценщиков, затем (опционально)…
official
agent-observability-experiment-analyzer
datadog-labs
Анализируйте результаты экспериментов LLM. Поддерживает одиночные или сравнительные эксперименты, исследовательский режим или режим вопросов и ответов. Используйте, когда пользователь говорит «проанализировать эксперимент», «сравнить…»
official
agent-observability-replay-trace
datadog-labs
Используется, когда разработчик хочет итерировать по ОДНОМУ конкретному трейсу Agent Observability / LLM Obs, результат которого ему не понравился — повторно запуская этот трейс против их…
official
agent-observability-trace-rca
datadog-labs
Анализ первопричин на основе производственных LLM-трейсов. Диагностирует, почему LLM-приложение даёт сбои — работает с вердиктами eval-судей, ошибками времени выполнения или структурными…
official