Fork me on GitHub

2020年3月29日

摘要: 加权轮询 后端集群每台机器都分配一个权重,权重高得会承担更多的流量,相反权重低的分配的流量也会少,这种策略允许后端集群机器配置差异化 java实现 多线程输出结果 阅读全文
posted @ 2020-03-29 09:55 OneLi算法分享社区 阅读(497) 评论(0) 推荐(0) 编辑

2020年2月26日

摘要: DB2 10.5 with BLU Acceleration 使用内存柱技术(in memory columnar technologies)加快了分析和报告速度。按列组织的表将会存储磁盘上单独一组页面的每一列,在磁盘上按照列组织数据可以减少处理查询所需的 I/O 数量,因为只需要访问查询中引用的列 阅读全文
posted @ 2020-02-26 14:52 OneLi算法分享社区 阅读(519) 评论(0) 推荐(0) 编辑

2019年11月12日

摘要: + "安装" + "Java调用" mongodb linux x86_64 3.6.3.tgz 把下载好的mongodb包解压到/usr/local/ ,重命名为mongodb 创建软连接 启动 开机自启动 查看版本号 进入mongo命令行 pom依赖 java调用示例 阅读全文
posted @ 2019-11-12 16:34 OneLi算法分享社区 阅读(557) 评论(0) 推荐(0) 编辑

2019年10月29日

摘要: 合并同级目录下所有excel文件 阅读全文
posted @ 2019-10-29 21:10 OneLi算法分享社区 阅读(923) 评论(0) 推荐(0) 编辑

2019年9月17日

摘要: shell迁移脚本 导出需要迁移的数据库名文件,9条示例 python多线程迁移脚本 生产环境迁移 需要迁移的数据总量将近9T,总共6000多张表,按照表记录数从大到小生成表名文件。最先处理的都是数据量在亿级别的大表 服务器性能监控 top查看每个cpu使用率在70,80%左右。iptraf查看网络 阅读全文
posted @ 2019-09-17 19:14 OneLi算法分享社区 阅读(391) 评论(0) 推荐(0) 编辑

2019年8月26日

摘要: 需求分析 项目上需要用到手机号前7位,判断号码是否合法,还有归属地查询。旧的数据是几年前了太久了,打算用python爬虫重新爬一份 单线程版本 发现爬取一个号段,共10000次查询,单线程版大概要多1个半小时,太慢了。 多线程版本 多线程版的1个号码段1000条数据,大概2,3min就好,cpu使用 阅读全文
posted @ 2019-08-26 16:27 OneLi算法分享社区 阅读(848) 评论(2) 推荐(0) 编辑

2019年8月9日

摘要: rmbp256g,乞丐版 256g的容量,安装软件得处处小心。。。 前期功课 在b站上看了一些拆解升级ssd的视频,做了一些功课,了解了我这个型号的,Retina, 13 inch, Late 2013,ssd不是在硬盘上焊死的,可以升级。了解了拆机过程和对应需要的工具后,就是上万能的tb了 前期软 阅读全文
posted @ 2019-08-09 09:28 OneLi算法分享社区 阅读(4795) 评论(1) 推荐(0) 编辑

2019年7月19日

摘要: 训练时间 在mbp的i5的cpu上训练了3轮,花的时间如下 kaggle gpu telsa 对比gpu和cpu,时间相差了1,2个数量级 GeForce GTX 1080 在本地开发环境上的入门级显卡1080上,训练时间后和kaggle的环境相差不多。 Epoch=50 输出前后几轮的训练时间 最 阅读全文
posted @ 2019-07-19 10:21 OneLi算法分享社区 阅读(1030) 评论(0) 推荐(0) 编辑

2019年7月12日

摘要: 问题描述 postgres数据库之前没有备份机制,现在加上以防万一。每周末备份1次,只保留最新的3个sql文件 shell脚本 bash config begin meta_host=" . . . " mete_user="mete_user" mete_databse="mete_databse 阅读全文
posted @ 2019-07-12 09:08 OneLi算法分享社区 阅读(1091) 评论(0) 推荐(0) 编辑

2019年7月11日

摘要: 问题描述 项目中需要用到流程图,如果用js的echarts处理,不同层级建动态计算位置比较复杂,考虑用python来实现 测试demo实现效果如下 完整代码 测试流程图 用不同的参数,生成的2个图如下 linux环境搭建 线上是不连外网的私有服务器,开始在离线环境安装,需要依赖的包太多,后来就在虚拟 阅读全文
posted @ 2019-07-11 15:44 OneLi算法分享社区 阅读(16898) 评论(1) 推荐(2) 编辑

导航