09 2021 档案

Bash脚本实现批量作业并行化
摘要：在Linux下运行作业时, 经常会遇到以下情形: 有大量作业需要运行, 完成每个作业所需要的时间也不是很长. 如果我们以串行方式来运行这些作业, 可能要耗费较长的时间; 若采用并行方式运行则可以大大节约运行时间. 再者, 目前的计算机绝大部分都是多核架构, 要想充分发挥它们的计算能力也需要并行化. 阅读全文
posted @ 2021-09-15 21:39 Raymone1125 阅读(329) 评论(0) 推荐(0) 编辑
python的Tqdm模块
摘要：Tqdm 是一个快速，可扩展的Python进度条，可以在 Python 长循环中添加一个进度提示信息，用户只需要封装任意的迭代器 tqdm(iterator)。 我的系统是window环境，首先安装python，接下来就是pip。 pip安装： 在python根目录下创建一个get-pip.py的文 阅读全文
posted @ 2021-09-15 09:31 Raymone1125 阅读(676) 评论(0) 推荐(0) 编辑
使用Python中的config配置
摘要：Python中有ConfigParser类，可以很方便的从配置文件中读取数据（如DB的配置，路径的配置），所以可以自己写一个函数，实现读取config配置。 config文件的写法比较简单，[section]下配置key=value，一下是例子：db.conf #配置数据库 [database] d 阅读全文
posted @ 2021-09-08 13:49 Raymone1125 阅读(1580) 评论(0) 推荐(0) 编辑
查看keras或者tensorflow正在使用的GPU
摘要：查看keras认得到的GPU from keras import backend as K K.tensorflow_backend._get_available_gpus() Out[28]: ['/job:localhost/replica:0/task:0/device:GPU:0'] 查看更 阅读全文
posted @ 2021-09-08 13:46 Raymone1125 阅读(325) 评论(0) 推荐(0) 编辑