run-on-slurm
โดย nvidia
วิธีการเปิดใช้งานงานฝึกอบรม Megatron-LM แบบกระจายบนคลัสเตอร์ SLURM ครอบคลุมโครงสร้าง sbatch ขั้นต่ำ การตั้งค่าตัวแปรสภาพแวดล้อมสำหรับ torch.distributed.run,…
npx skills add https://github.com/nvidia/megatron-lm --skill run-on-slurm