摘要：
watch -n 0.1 nvidia-smi watch --color -n1 gpustat -cpu # pip install gpustat 阅读全文
摘要：
学习率预热 在预热期间，学习率从0线性增加到优化器中的初始lr。 在预热阶段之后创建一个schedule，使其学习率从优化器中的初始lr线性降低到0 Parameters optimizer (Optimizer) – The optimizer for which to schedule the 阅读全文
摘要：
https://docs.python.org/zh-cn/3/library/argparse.html import argparse parser = argparse.ArgumentParser() parser.add_argument('--dataset-type', type=st 阅读全文