Accelerate is een bibliotheek waarmee dezelfde PyTorch-code kan worden uitgevoerd op elke gedistribueerde configuratie. Meer informatie: https://huggingface.co/docs/accelerate/index.
accelerate env
accelerate config
accelerate estimate-memory {{name/model}}
accelerate test --config_file {{pad/naar/config.yaml}}
accelerate launch {{pad/naar/script.py}} {{--cpu}}
accelerate launch {{pad/naar/script.py}} --multi_gpu --num_machines 2