accelerate.md 828 B

accelerate

Accelerate is een bibliotheek waarmee dezelfde PyTorch-code kan worden uitgevoerd op elke gedistribueerde configuratie. Meer informatie: https://huggingface.co/docs/accelerate/index.

  • Toon informatie over de omgeving:

accelerate env

  • Maak interactief een configuratiebestand:

accelerate config

  • Toon de geschatte GPU-geheugenkosten van het uitvoeren van een Hugging Face model met verschillende gegevenstypen:

accelerate estimate-memory {{name/model}}

  • Test een Accelerate configuratiebestand:

accelerate test --config_file {{pad/naar/config.yaml}}

  • Voer een model uit op CPU met Accelerate:

accelerate launch {{pad/naar/script.py}} {{--cpu}}

  • Voer een model uit op multi-GPU met Accelerate, met 2 machines:

accelerate launch {{pad/naar/script.py}} --multi_gpu --num_machines 2