[Spring cloud 一步步实现广告系统] 12. 广告索引介绍

endless_road 发布于2019-08-19 10:22 / 833人阅读

摘要：索引设计介绍在我们广告系统中，为了我们能更快的拿到我们想要的广告数据，我们需要对广告数据添加类似于数据库一样的索引结构，分两大类正向索引和倒排索引。如何在广告系统中使用倒排索引核心用途是对各个维度限制的整理。

索引设计介绍

在我们广告系统中，为了我们能更快的拿到我们想要的广告数据，我们需要对广告数据添加类似于数据库index一样的索引结构，分两大类：正向索引和倒排索引。

正向索引

通过唯一键/主键生成与对象的映射关系。

比如，我们从数据库中查询数据的时候，根据数据主键ID查询当前记录，其实就是一个正向索引的过程。

根据这个描述，很明显，我们的正向索引适用于推广计划,推广单元 和创意这几张表的数据上，因为广告检索的请求信息，不可能是请求具体的计划或推广单元，它的检索请求一定是限制条件。

倒排索引

也叫反向索引，是一种检索方法。它的设计是为了存储在全文检索下某个单词在一个文档货一组文档中存储位置的映射，是在文件检索系统中最常用的数据结构。

也就是我们提供具体的内容实例，根据内容来查询该内容所处的位置。

如何在广告系统中使用倒排索引？

核心用途是对各个维度 限制的整理。

如图中所示，我们希望找到西安市的所有的推广单元信息，那么我们只需要根据陕西省-西安市来进行索引，可以快速定位到所在的推广单元有10，11两个。

索引维护介绍

索引的维护最主要的是为了保证检索服务中的索引是完整的，我们在维护索引数据的时候，有两种场景会带来广告数据。在系统启动之初，会有一部分初始化数据，在系统上线运行之后，会逐渐有不少新的广告信息加入。因此，我们的广告索引类型整体可以分为两大类：

全量索引

检索系统在每次启动的时候，需要一次性读取当前数据库中的所有数据，建立索引。

TIPS：（这里有一个问题，如果我们系统流量高的时候，需要部署多实例，每一个实例在系统启动的时候，都直接从数据库中加载全量索引，会对数据库造成极大的压力。）

因此，通常我们实现全量索引都是通过读取文件中预先存储的广告数据来实现全量索引导入。

增量索引

顾名思义就是后来新增的数据索引。系统在运行过程中，会对数据库的变动进行监控，实现加载更新，构建索引，我们系统中通过对数据库表的CRUD操作的变动，通过监听Binlog来实现增量索引的更新。

GPU云服务器云服务器开屏广告实现一步步搭建物联网系统广告系统 asp 广告管理系统

文章版权归作者所有，未经允许请勿转载,若此文章存在违规行为，您可以联系管理员删除。

转载请注明本文地址：https://www.ucloud.cn/yun/75913.html

[Spring cloud 一步步实现广告系统] 13. 索引服务编码实现

摘要：上一节我们分析了广告索引的维护有种，全量索引加载和增量索引维护。因为广告检索是广告系统中最为重要的环节，大家一定要认真理解我们索引设计的思路，接下来我们来编码实现索引维护功能。上一节我们分析了广告索引的维护有2种，全量索引加载和增量索引维护。因为广告检索是广告系统中最为重要的环节，大家一定要认真理解我们索引设计的思路，接下来我们来编码实现索引维护功能。我们来定义一个接口，来接收所有...

stefanieliang 2019-08-19 10:22 评论0 收藏0
[Spring cloud 一步步实现广告系统] 7. 中期总结回顾

摘要：在前面的过程中，我们创建了个服务发现我们使用作为服务发现组件，学习了的使用。加依赖加注解改配置使用项目三部曲，我们可以快速添加一个新组件，并正常使用这个我没有在项目中实现，但是大家可以和一样，三部曲搞定。在前面的过程中，我们创建了4个project：服务发现我们使用Eureka 作为服务发现组件，学习了Eureka Server,Eureka Client的使用。 Eureka...

cnsworder 2019-08-19 10:13 评论0 收藏0
[Spring cloud 一步步实现广告系统] 14. 全量索引代码实现

摘要：各个表数据的存储文件名定义索引对象导出的字段信息依然用为例。通用处理索引类索引之间存在层级划分，也就是相互之间拥有依赖关系的划分加载全量索引其实是增量索引添加的一种特殊实现若初实现广告推广计划的第二层级索引实现。上一节我们实现了索引基本操作的类以及索引缓存工具类，本小节我们开始实现加载全量索引数据，在加载全量索引数据之前，我们需要先将数据库中的表数据导出到一份文件中。Lets cod...

MycLambert 2019-08-19 10:23 评论0 收藏0
[Spring cloud 一步步实现广告系统] 8. 检索系统配置&依赖

摘要：工作流程项目依赖监控面板引入服务调用的组件依赖引入服务消费者的依赖数据库链接依赖工具类集合类操作日志监听解析开源工具类库中的配置相关依赖图片压缩工作流程 showImg(https://i.loli.net/2019/07/29/5d3ee1829df4d57461.png); 项目依赖 org.springframewo...

dailybird 2019-08-19 10:14 评论0 收藏0
[Spring cloud 一步步实现广告系统] 10. 使用Ribbon 实现微服务调用

摘要：在使用调用广告投放系统之前，我们需要先创建个对象，数据请求对象请求响应结果反序列化对象在启动类中，添加客户端。注册让在调用服务的时候，可以实现负载均衡创建一个，来测试调用广告提供系统的若初注入在使用Ribbon调用广告投放系统API之前，我们需要先创建2个VO对象，AdPlanVO,AdPlanGetRequestVO. //数据请求对象 @Data @NoArgsConstruct...

junbaor 2019-08-19 10:16 评论0 收藏0