(自用备忘)huggingface accelerate 使用方法
用accelerate config 生成和 deepspeed相关的参数。
然后参数文件在/home/yuanhang/.cache/huggingface/accelerate/default_config.yaml, 会被自动使用。
用下面这个命令杀掉 wandb 的余孽:
ps aux | grep wandb | awk '{print $2}' | xargs kill -9
用accelerate config 生成和 deepspeed相关的参数。
然后参数文件在/home/yuanhang/.cache/huggingface/accelerate/default_config.yaml, 会被自动使用。
用下面这个命令杀掉 wandb 的余孽:
ps aux | grep wandb | awk '{print $2}' | xargs kill -9