随笔分类 - [Spring cloud 一步步实现广告系统]
[Spring cloud 一步步实现广告系统]
摘要：到目前为止，我们整个初级广告检索系统就初步开发完成了，我们来整体回顾一下我们的广告系统。 整个广告系统编码结构如下： 1. 父模块 主要是为了方便我们项目的统一管理 2. 这个模块主要有2个作用，本身只应该作为数据库脚本管理package来使用，但是我们在生成索引文件的过程中，为了方便，我就直接将导
阅读全文
摘要：广告系统学习过程中问题答疑 博客园 "Eureka集群启动报错" Answer 因为Eureka在集群启动过程中，会连接集群中其他的机器进行数据同步，在这个过程中，如果别的服务还没有启动完成，就会出现 error，当其他节点启动完成之后，报错就会消失。 AdSearch 服务启动报错 查看这个错误，
阅读全文
摘要：系统运行 经过长时间的编码实现，我们的主体模块已经大致完成，因为之前我们都是零散的对各个微服务自行测试，接下来，我们需要将所有的服务模块进行联调测试，Let's do it. 清除测试数据&测试文件 我们在实现各个服务的过程中，添加了不少的测试文件和测试数据，为了不影响我们最终的展示效果，我们先将之
阅读全文
摘要：在之前的18次文章中，我们实现了广告系统的 ，`广告检索 服务发现Eureka 服务调用Feign 网关路由Zuul 错误熔断Hystrix Spring Cloud`组件。 简单调用关系： 但是系统往往都会报错，我们之前定义了一些容错类和方法，但是只是在控制台可以看到错误信息，我们想要统计一些数据
阅读全文
摘要：根据三个维度继续过滤 在上一节中我们实现了根据流量信息过滤的代码，但是我们的条件有可能是多条件一起传给我们的检索服务的，本节我们继续实现根据推广单元的三个维度条件的过滤。 在 类中添加过滤方法 定义三个方法实现过滤 根据推广单元id获取推广创意 我们知道，推广单元和推广创意的关系是多对多，从上文我们
阅读全文
摘要：广告检索服务 功能介绍 媒体方（手机APP打开的展示广告，走在路上看到的大屏幕广告等等） 请求数据对象实现 从上图我们可以看出，在媒体方向我们的广告检索系统发起请求的时候，请求中会有很多的请求参数信息，他们分为了三个部分，我们来编码封装这几个参数对象信息以及我们请求本身的信息。Let's code.
阅读全文
摘要：实现增量数据索引 上一节中，我们为实现增量索引的加载做了充足的准备，使用到 开源组件来实现MySQL 的binlog监听，关于binlog的相关知识，大家可以自行网络查阅。或者可以 本节我们将根据binlog 的数据对象，来实现增量数据的处理，我们构建广告的增量数据，其实说白了就是为了在后期能把广告
阅读全文
摘要：MySQL Binlog简介 什么是binlog? 一个二进制日志，用来记录对数据发生或潜在发生更改的SQL语句，并以而进行的形式保存在磁盘中。 binlog 的作用？ 最主要有3个用途： 数据复制（主从同步） Mysql 的Master Slave协议，让Slave可以通过监听binlog实现数据
阅读全文
摘要：上一节我们实现了索引基本操作的类以及索引缓存工具类，本小节我们开始实现加载全量索引数据，在加载全量索引数据之前，我们需要先将数据库中的表数据导出到一份文件中。Let's code. 1.首先定义一个常量类，用来存储导出文件存储的目录和文件名称 因为我们导出的文件需要在搜索服务中使用到，因此，我们将文
阅读全文
摘要："上一节" 我们分析了广告索引的维护有2种， 和`增量索引维护`。因为广告检索是广告系统中最为重要的环节，大家一定要认真理解我们索引设计的思路，接下来我们来编码实现索引维护功能。 我们来定义一个接口，来接收所有index的增删改查操作，接口定义一个范型，来接收2个参数， 代表我们索引的健值， 代表返
阅读全文
摘要：索引设计介绍 在我们广告系统中，为了我们能更快的拿到我们想要的广告数据，我们需要对广告数据添加类似于数据库index一样的索引结构，分两大类： 和`倒排索引`。 正向索引 通过唯一键/主键生成与对象的映射关系。 比如，我们从数据库中查询数据的时候，根据数据主键ID查询当前记录，其实就是一个正向索引的
阅读全文
摘要：上一节我们使用了Ribbon(基于 )进行微服务的调用，Ribbon的调用比较简单，通过Ribbon组件对请求的服务进行拦截，通过 获取到服务实例的 ,然后再去调用API。本节课我们使用更简单的方式来实现，使用声明式的 服务客户端 ，我们只需要使用Feign来声明接口，利用 来进行配置就可以使用了，
阅读全文
摘要：在使用Ribbon调用广告投放系统API之前，我们需要先创建2个VO对象， ,`AdPlanGetRequestVO`. 在 启动类中，添加 客户端。 创建一个controller，来测试调用广告提供系统的API
阅读全文
摘要：搜索系统启动主类 配置文件
阅读全文
摘要：工作流程 项目依赖
阅读全文
摘要：在前面的过程中，我们创建了4个project： "服务发现" 我们使用Eureka 作为服务发现组件，学习了 ,`Eureka Client`的使用。 Eureka Server 1. 加依赖 2. 加注解 3. 改配置 使用Sprint Boot 项目三部曲，我们可以快速添加一个新组件，并正常使用
阅读全文
摘要：DAO层设计实现 这里我们使用 来实现数据库操作，当然大家也可以使用 ，都是一样的，我们依然以用户表操作为例： JPARepository 的默认实现方法，如果我们只是继承了 而没有实现具体的操作方法，我们也是可以通过使用它的默认方法来做 操作的，如下： 功能Service实现 创建service
阅读全文
摘要：广告投放系统启动主类说明 配置信息 创建实体对象 实体类和数据库表一般是一一对应，通常称之为 ，以用户表为例： "Lombok传送门" 其他的数据库对应实体类（ ,`AdPlan AdCreative AdUnitDistrict AdUnitHobby AdUnitKeyword Relation
阅读全文
摘要：一个大的系统，在代码的复用肯定是必不可少的，它能解决： 1. 统一的响应处理（可以对外提供统一的响应对象包装） 2. 统一的异常处理（可以将业务异常统一收集处理） 3. 通用代码定义、配置定义（通用的配置信息放在统一的代码管理中，便于维护和更新） 创建项目 POM文件 项目结构 vo (统一响应对象
阅读全文
摘要：Zuul（Router and Filter） WIKI: "传送门" 作用 1. 认证，鉴权（Authentication/Security） 2. 预判（Insights） 3. 压力测试（Stress Testing） 4. 灰度/金丝雀测试（Canary Testing） 5. 动态路由（D
阅读全文