随笔分类 -  生活随笔

使用python处理百万条数据分享(适用于java新手)
摘要：1、前言 因为负责基础服务,经常需要处理一些数据,但是大多时候采用awk以及java程序即可,但是这次突然有百万级数据需要处理,通过awk无法进行匹配,然后我又采用java来处理,文件一分为8同时开启8个线程并发处理,但是依然处理很慢,处理时长起码在1天+所以无法忍受这样的处理速度就采用python 阅读全文
posted @ 2018-06-04 21:18 朝向远方 阅读(3571) 评论(13) 推荐(2) 编辑
记录一次线上处理5千万数据转换的经验
摘要：前言：刚来新公司2个月就面临了一次线上真实数据的转换,这些数据异常重要,对我们公司来说就是客户的资源,说白了就是客户存在我们公司的钱,一旦处理失败将会影响极大,可以想象一下你存银行2万元,第二天查询却一分钱没有的情况,但是很遗憾此次处理没有处理好,造成了极大的影响,对我个人而言也是,后续我对此次数据 阅读全文
posted @ 2017-12-13 20:38 朝向远方 阅读(3059) 评论(4) 推荐(5) 编辑
我从.net转到java的心得和体会
摘要：前言：由于有不少人咨询过我如果从.net转java,有什么技巧吗,我现在就分享我从.net转java的历程,这里不涉及两门语言的比较,记录的都是我个人的观点。 一：从.net转java的初衷 我是2013年11月开始从事.net工作一直到2016年3月份从北京一家公司辞职,前后大约用了2年半的时间。 阅读全文
posted @ 2017-11-22 21:02 朝向远方 编辑
也谈谈我面试的经历
摘要：前言：春节过后回到公司一段时间后就选择了辞职，前前后后面试了6天，一共10家公司，技术过了6家，拿到了其中3家公司的offer，最终决定来到某个二线互联网公司工作。以下面试企业为了保密我不说实际名称 第一家公司：简称A 由于刚刚开始面试选择试试水，就在智联上投递了一写公司，这家就是第一个让我去面试的 阅读全文
posted @ 2017-04-05 14:42 朝向远方 阅读(11412) 评论(64) 推荐(24) 编辑

点击右上角即可分享
微信分享提示