11 2024 档案

摘要:数据抽取平台pydatax,前期项目做过介绍: 1,数据抽取平台pydatax介绍--实现和项目使用 项目2: 客户有9个分公司,用的ERP有9套,有9个库,不同版本,抽取的同一个表字段长度有不一样,字段可能有多有少,客户ERP核心分公司ERP几个月后有大版本升级。 在2023年12月,当时做这个抽 阅读全文
posted @ 2024-11-25 11:11 zping 阅读(332) 评论(0) 推荐(1)
摘要:公司SaaS系统有个给客户的员工发放金币,最后计算金币老是流水和总额对不上,以前负责这块的人做过修改还是不对,后来这负责人离职,接手大数据的事情后,该客户真在用金币这块业务,而且财务用这个结算对账,2023年底客户逼急了,要彻底解决这个问题: 和负责这块的产品经理沟通这块内容,说这个金币计算有历史原 阅读全文
posted @ 2024-11-20 11:08 zping 阅读(1079) 评论(2) 推荐(6)
摘要:几年前MySQL数据库出现突然的从库延迟故障和CPU爆高时,如何排查具体原因,可能说已在腾讯云的MySQL库里开启了SQL全审计,记录了全部执行的SQL,再通过下面的方法就可以很容易找到原因: 1,实用QPS和TPS高的高效分析方法 但如果没有开通SQL全审计,如何去找原因。当然说可以看慢SQL日志 阅读全文
posted @ 2024-11-18 11:10 zping 阅读(955) 评论(0) 推荐(2)
摘要:导读:当我经过长时间的思考后准备给自己的职业生涯带来一个大的转折,并正式提交了离职报告后,回想在公司的这十年,百感交集。 作者:徐家骏 | 文章来源:码农徐家骏 走入华为:被一张华为人报“骗”到华为 1997 年7月16日,我只身提着一个包从深圳宝安机场下飞机,走出机场,天是那么蓝、白云那么低、空气 阅读全文
posted @ 2024-11-15 22:06 zping 阅读(194) 评论(0) 推荐(0)
摘要:记录一下2年前的MySQL大表的归档,当时刚到公司,发现MySQL的业务核心库,超过亿条的有7张表,最大的表有9亿多条,有37张表超过5百万条,部分表行数如下: 在测试的MySQL环境 : pt-archiver 工具,测试200的dev实例,5800万条数据,纯删除1000万条数据,花费约9分多钟 阅读全文
posted @ 2024-11-06 14:31 zping 阅读(132) 评论(0) 推荐(1)
摘要:种一德而百善丛生,动一念而乾坤皆变;好文易删,自行复制备存 何为风水?“风”就是气氛和场能,“水”就是流动和变化。 风水的原理是什么呢?非常核心的四个字——“心生万法”,非常简单,但是大道至简。 所有的风水中: 第一风水是什么?是人。 人的第一风水是什么?是心。 人的第二风水是什么?是嘴巴。 人的第 阅读全文
posted @ 2024-11-04 16:25 zping 阅读(200) 评论(0) 推荐(0)