炼丹的一些trick

采摘一些大佬的果实：

• 知乎：如何理解深度学习分布式训练中的large batch size与learning rate的关系？
• https://blog.csdn.net/shanglianlm/article/details/84821891