llm-obs-eval-pipeline
oleh datadog-labs
Pipeline Observabilitas LLM end-to-end untuk ml_app yang terinstrumentasi — klasifikasikan trace produksi, analisis akar penyebab kegagalan, bootstrap evaluator, lalu (opsional)…
npx skills add https://github.com/datadog-labs/agent-skills --skill llm-obs-eval-pipelineLebih banyak skill dari datadog-labs
dd-audit-compliance-report
datadog-labs
Hasilkan bukti kepatuhan yang siap diaudit dari Datadog Audit Trail untuk SOC 2 dan PCI DSS. Memetakan kontrol kerangka kerja ke pola kueri spesifik dan menghasilkan…
experiment-analyzer
datadog-labs
Menganalisis hasil eksperimen LLM. Menangani eksperimen tunggal atau komparatif, mode eksploratif atau tanya jawab. Gunakan saat pengguna mengatakan "analisis eksperimen", "bandingkan…
dd-logs
datadog-labs
Manajemen log - pencarian, pipeline, arsip, dan kontrol biaya.
dd-monitors
datadog-labs
Manajemen monitor - membuat, memperbarui, membisukan, dan praktik terbaik pemberitahuan.
dd-audit-cost-spike-investigation
datadog-labs
Menyelidiki lonjakan penggunaan produk atau biaya Datadog dengan menghubungkan data Usage Metering (kapan/apa yang melonjak) dengan perubahan konfigurasi Audit Trail (siapa yang mengubah apa di…
dd-audit-key-compromise
datadog-labs
Selidiki kunci API Datadog yang berpotensi disusupi — linimasa tindakan, rincian geo/IP, titik akhir yang dipanggil, tanda anomali, dan langkah perbaikan.
eval-trace-rca
datadog-labs
Analisis akar penyebab pada jejak LLM produksi menggunakan hasil evaluasi hakim sebagai sinyal. Mendiagnosis mengapa aplikasi pengguna gagal. Gunakan saat pengguna mengatakan "eval…
dd-account-setup
datadog-labs
Pastikan pengguna memiliki akun Datadog yang terautentikasi dengan DD_API_KEY yang valid di region yang tepat sebelum melakukan pengaturan atau instrumentasi Datadog apa pun. Mendeteksi yang sudah ada…