06 2018 档案

线上数据库字段扩容引发业务方超时总结
摘要：前言：在实际项目中,我们可能会出现业务扩展,但是现状却无法满足,需要对现有的表字段扩容或者增加字段等情况,但是如果数据库的数据量如果过大,我们就需要考虑修改字段带来的影响.在这里我分享一个我在实际项目上因为对字段进行扩容引发的事故。 一、背景 由于业务方提出需求,我们现在库存无法满足,经过沟通我们决 阅读全文
posted @ 2018-06-14 12:46 朝向远方 阅读(1506) 评论(2) 推荐(1) 编辑
使用python处理百万条数据分享(适用于java新手)
摘要：1、前言 因为负责基础服务,经常需要处理一些数据,但是大多时候采用awk以及java程序即可,但是这次突然有百万级数据需要处理,通过awk无法进行匹配,然后我又采用java来处理,文件一分为8同时开启8个线程并发处理,但是依然处理很慢,处理时长起码在1天+所以无法忍受这样的处理速度就采用python 阅读全文
posted @ 2018-06-04 21:18 朝向远方 阅读(3570) 评论(13) 推荐(2) 编辑

点击右上角即可分享
微信分享提示