摘要： 前言 了解清晰架构之前需要大家先熟悉以下常见架构方案： EBI架构(Entity-Boundary-Interactor Architecture)领域驱动设计(Domain-Driven Design)端口与适配器架构(Ports & Adapters Architecture,又称为六边形架构) 阅读全文

摘要： 引言 随着业务系统和底层中间件服务的复杂度不断增加，传统手工运维方式面临着诸多挑战和限制。人工编写运维脚本显得非常低效，同时手动执行运维操作存在着巨大风险。在此情况下，推动运维自动化成为运维人员必须落地实施的工作。运维同学如果可以有地方自主通过编码的方式，实现各种自动化任务和运维功能。不仅可以提高效 阅读全文

摘要： 背景 最近在阅读查询优化器的论文，发现System R中对于Join操作的定义一般分为了两种，即嵌套循环、排序-合并联接。在原文中，更倾向使用排序-合并联接逻辑。 考虑到我的领域是在处理分库分表或者其他的分区模式，这让我开始不由得联想我们怎么在分布式场景应用这个Join逻辑，对于两个不同库里面的不同 阅读全文

摘要： spark为什么比mapreduce快？ 首先澄清几个误区： 1：两者都是基于内存计算的，任何计算框架都肯定是基于内存的，所以网上说的spark是基于内存计算所以快，显然是错误的 2;DAG计算模型减少的是磁盘I/O次数（相比于mapreduce计算模型而言），而不是shuffle次数，因为shuf 阅读全文

摘要： 引言 近期在参与编写平台工程系列标准时，我发现开发者体验 (DevEx) 是一个不可忽视的关键因素，它对于构建一个成功的平台工程起到了重要的作用，DevEx 可以称之为平台工程的基础。基于我最近的学习和思考，我决定写这篇文章，想深入探讨一下 DevEx 对于内部开发平台的重要性，也希望为从事内部开发 阅读全文

摘要： 背景 营销系统中，客户投诉是业务发展的一大阻碍，一般会过滤掉黑名单高风险账号，并配合频控策略，来减少客诉，进而增加营销效率，减少营销成本，提升营销质量。 营销系统一般是通过大数据分析建模，在CDP（客户数据平台，以客户为核心，围绕数据融合、人群圈选、用户洞察等提供产品能力）创建营销目标客户群体，黑名 阅读全文

摘要： 引言 最初考虑引用“ DevOps 已死，平台工程才是未来”作为标题，但这样的表达可能太过于绝对。最终，决定用了“扯淡的”这个词来描述 DevOps，但这并不是一种文明的表达方式。 文章旨在重新审视 DevOps 和平台工程，将分别探讨 DevOps 和平台工程的概念，并重点分析平台工程所倡导的一些 阅读全文

摘要： 在我们的测试工作中，是不是经常遇到这样的情形，发生了线上问题，产品、研发或者测试同学一拍脑袋：当时怎么没有想到，怎么给漏掉了呢？明明是一个非常简单的事情，用大拇指都能想到的验证场景，为何当时就漏测了呢？但实际情况是，逃逸到线上的缺陷，疑难杂症式的极端异常的问题很少，大部分都不复杂且可以在设计和开发中 阅读全文

摘要： 1. 问题背景 问题的背景是这样的，在最近需求开发中遇到需要将给定目标数据通过某一固定的计量规则进行过滤并打标生成明细数据，其中发现存在一笔目标数据的时间在不符合现有日期规则的条件下，还是通过了规则引擎的匹配打标操作。故而需要对该错误匹配场景进行排查，定位其根本原因所在。 2. 排查思路 2.1 数 阅读全文

摘要： 前言 笔者近日在做代码仓库的存量代码缩减工作，首先考虑的是基于静态扫描的缩减，尝试使用了很多工具来对代码进行优化，例如PMD、IDEA自带的inspect功能、findBugs等。但是无一例外，要么过于“保守”，只给出扫描结果，但是无法实现一键优化，要么直接就是有bug（这里特指IDEA2023.1 阅读全文