Hugging Face Evaluation

von huggingface

Evaluierungsergebnisse in Hugging Face-Modellkarten hinzufügen und verwalten. Unterstützt das Extrahieren von Evaluierungstabellen aus README-Inhalten, das Importieren von Bewertungen aus der Artificial Analysis API und das Durchführen benutzerdefinierter Modellevaluierungen mit vLLM/lighteval. Funktioniert mit dem model-index-Metadatenformat.

npx skills add https://github.com/huggingface/skills --skill hugging-face-evaluation

ZIP herunterladen GitHub

Mehr Skills von huggingface

Bietet Anleitung zum Schreiben, Optimieren und Benchmarken von C++ CPU-Kernels mit SIMD-Intrinsics (AVX2/AVX512) für das Hugging Face Kernels-Ökosystem. Enthält…

generate-openenv-env

Generiere OpenEnv-Umgebungen aus einem konkreten Anwendungsfall (z. B. „generiere eine Umgebung für die Bibliothek textarena“). Verwende, wenn du aufgefordert wirst, eine neue zu entwerfen oder zu implementieren…

Nutze den Hugging Face Hub über MCP-Server-Tools. Durchsuche Modelle, Datensätze, Spaces, Papers. Rufe Repo-Details ab, rufe Dokumentationen ab, führe Compute-Jobs aus und nutze Gradio…

Trainieren und Feinabstimmen von Transformer-Sprachmodellen mit TRL (Transformers Reinforcement Learning). Unterstützt SFT, DPO, GRPO, KTO, RLOO und Reward-Modell-Training…

Stelle eine OpenEnv-Umgebung auf Hugging Face Spaces bereit. Verwende dies, wenn du aufgefordert wirst, etwas bereitzustellen, auf Hugging Face zu pushen oder einen Space zu aktualisieren.

hf-space-recovery

Diagnose and recover failing or stuck Hugging Face Space deployments for OpenEnv environments. Use when deploying envs from `envs/` to the Hub (`openenv`…

Änderungen vor dem Einreichen eines Pull Requests validieren. Führen Sie umfassende Prüfungen durch, einschließlich Lint, Tests, Ausrichtungsüberprüfung und RFC-Analyse. Verwenden Sie vor dem Erstellen eines…

Beispiel-Fixture-Skill für Action-Smoke-Tests