摘要:需求描述某些页面需要配置广告或活动宣传图,广告或活动需满足随时上下线过期自动下线及到时自动上线。第步给前端写接口查询页面广告按标准的控制层,业务层,数据访问层写,第一步中的逻辑就是在业务层完成的。
背景引入
最近需要实现一个功能,关于页面广告自动配置的,如支付宝的支付完成页。这篇文章是记录对这个需求从分析到实现以及优化的过程,以免以后忘记。
需求描述某些页面需要配置广告或活动宣传图,广告或活动需满足随时上下线、过期自动下线及到时自动上线。
如:现在时间2019-2-22 16:16:13,要在支付完成页面配置领奖活动,活动要在2019-3-10 00:00:00准时上线,在2019-3-30 23:59:59结束活动。
所以要的效果是,在活动上线前的任意时刻配置完活动后,页面到时间自动上线这个活动。
也可能会是其他的多个活动或广告,每个页面广告的个数可变,不同上下线时间可不同,其他页面也需要实现这样的功能,页面与页面之间的活动不一定一样。
需求简单的几句话,那么我们来具体的分析一下。
提取关键词广告或活动宣传图
随时上下线、过期自动下线及到时自动上线
每个页面广告的个数可变
不同广告上下线时间可不同
页面与页面之间的活动不一定一样
数据库分析1、【广告或活动宣传图】
要为不同页面设置不同的广告,有的页面广告可能一样,也就是广告会复用,所有要有广告表。
2、【每个页面广告的个数可变】【不同广告上下线时间可不同】【页面与页面之间的活动不一定一样】
页面可配置多个广告,所有要有页面配置表,以及广告和页面的关系表,即页面广告表。
页面配置表主要配置页面的广告个数,实现【每个页面广告的个数可变】,页面广告表主要配置页面的每个广告上下线时间,实现【不同广告上下线时间可不同】
简单分析后得出如下表结构:广告表adv,页面配置表page_config,页面广告表page_adv
这些页面配置的广告在一段时间内是不会变的,如果页面请求次数较多,广告查询次数就会很频繁,对数据库造成不必要的压力。所以可以引入缓存,降低数据库请求次数,缓解数据库压力。这里使用的Redis。
何时入缓存?
可以选择在服务启动时异步把已在上下线时间区间内的广告先加载至缓存,或选择在请求时取缓存,缓存内没有时再查库然后放缓存。缓存时间视情况而定。
这里选择的是,项目启动时异步把符合条件的页面广告配置信息存入Redis,那些还没到指定时间的先不放Redis,等到访问页面加载广告时,先查Redis,若无则按条件(>=nowtime)查库,查到后存Redis。
在接口中拿到广告配置信息后,判断当前时间是否在配置的时间区间内,由于一个页面配置多个广告,不同广告时间也不同,所以要迭代,把符合的返回,有过期的就做标记,然后把整个页面的配置信息在Redis里删除。
(或者不选择在启动时加载,就在用户请求时加入缓存,但是下面的第1步的方法在刷新加载时会用到,故不能删)
a、查询所有pageId
SELECT pageId FROM page_config page_adv WHERE nowtime<=endtime AND GROUP BY pageId
两个表内连接,得List
b、查询pegeId对应的广告图片及跳转链接
SELECT 字段名 FROM page_adv adv WHERE begintime<=nowtime<=endtime AND pageId={#pageId}
然后把查到的配置信息List
按标准的控制层,业务层,数据访问层写,第一步中的逻辑就是在业务层完成的。
控制层:
控制层接参pageId,调用业务层查询对应页面配置的广告信息,判空,直接返回状态码0,即无广告前端不展示。
不为空就根据业务逻辑处理数据(如img的URL加域名),然后返回状态码1,前端展示广告。
这里控制层还可以加逻辑,迭代广告list,把当前时间在广告起始时间内的返回,不在的不返回,并且只要有一个广告过期,就把这个页面的广告list缓存清掉。这个逻辑是把过期的清掉。
业务层:
先取缓存,没有再查库判断不为空(本页面配置的有广告),放入缓存(pageId为KEY),然后返回。
数据访问层:
SQL:
SELECT 字段名 FROM page_config adv page_adv WHERE begintime<=nowtime<=endtime AND pageId={pageId}
三表联查,根据pageId查询当前页面配置的广告活动信息(已在广告活动时间内)
第3步、刷新加载为什么使用刷新加载?
因为有这样的场景:给页面A配置了一个广告(当前时间在广告的起始时间内),那么这个页面的广告已经在缓存里了,假如此时A页面要新加一个广告,在后台配置后如果不做其他操作,这个广告不会显示(假设缓存时间较长,为一天),因为库更新了,缓存没有同步更新。
解决方案
使用Redis的发布订阅机制实现缓存的刷新加载,使新配置的广告及时能够显示。
刷新加载的回调方法即第1步中的方法。
想一想,目前的实现存在什么问题?
存在的问题
假如有页面需要配置广告,但是还没有配(前端已经开发完上线,每次都会调接口查广告信息),那么数据库肯定查不到,缓存也没有。如果这个页面访问量很大,那么缓存没命中就查库,这样对库的压力就会很大,这就是缓存穿透,请求上来了很容易击垮数据库。那怎么办呢?
解决方案
当页面没有配置广告时,在缓存存标志,查询时先看标志,在决定是否往下走。
具体方案
这时,上面的第1步就要改了。
1、首先改第1步的步骤a的SQL,把所有的pageId都查询出来。
使用左连接
SELECT pageId FROM page_config LEFT JOIN page_adv ON ... GROUP BY pageId
或者干脆查page_config
SELECT pageId FROM page_config
目的是把已在page_config表中配置,但关系表中page_adv未配置广告的pageId也查出来,这样才能给未配置广告的pageId在缓存里放标志
2、第1步的步骤b的SQL改为
SELECT 字段名 FROM page_adv adv WHERE nowtime<=endtime AND pageId={#pageId}
然后把查到的配置信息放入缓存之前判断【为空时的不做操作】改为【为空时存入一个标志】假如这个标志KEY为pageId+"EMPTY_FLAG",value为"DATABASE_IS_NULL"
为什么只判断小于结束时间
因为如果该页面配置的广告开始时间大于当前时间,那么这个是查不到的,会被处理为DATABASE_IS_NULL,如果在这个标志还没失效之前就到了配置的开始时间了,那么这个广告不会被展示。所有要让未到开始时间的也放入缓存,然后让控制层去判断在不在时间区间。
3、所以要在第2步也修改一下
在业务层里取缓存中的广告列表之前,先从缓存取pageId+"EMPTY_FLAG"的value判断为"DATABASE_IS_NULL"直接返回空,这样就能解决缓存穿透的问题了。
继续修改第2步的业务层,查库的SQL同样要改:
SELECT 字段名 FROM page_config adv page_adv WHERE nowtime<=endtime AND pageId=#{pageId}
然后判断为空的话,同上面的加粗斜体部分那样处理。
4、最后,第3步的刷新加载调的是第1步的方法,不用改。
当然这个缓存穿透的优化方案只是其中一种。还可以这样:
1、控制层拦截:根据pageId查询page_adv表,查不到说明没配置,直接返回。
2、page_config 表增加字段,表示当前页面已经配置的广告个数,默认0,每配置一个该字段加1,把大于0的pageId缓存起来,调接口时前判断在不在缓存里。
总结:实现这个功能并不是太难,主要用到了Redis的缓存技术,Redis发布订阅机制,关键就是细节的把控,以及缓存穿透的处理。
文章版权归作者所有,未经允许请勿转载,若此文章存在违规行为,您可以联系管理员删除。
转载请注明本文地址:https://www.ucloud.cn/yun/73634.html
摘要:和二级缓存影响状态更新,缩短这两个定时任务周期可减少滞后时间,例如配置更新周期更新周期服务提供者保证服务正常下线。服务提供者延迟下线。 引言 Eureka是Netflix开源的、用于实现服务注册和发现的服务。Spring Cloud Eureka基于Eureka进行二次封装,增加了更人性化的UI,使用更为方便。但是由于Eureka本身存在较多缓存,服务状态更新滞后,最常见的状况是:服务...
摘要:超过后则认为服务端出现故障,需要重连。同时在每次心跳时候都用当前时间和之前服务端响应绑定到上的时间相减判断是否需要重连即可。客户端检测到某个服务端迟迟没有响应心跳也能重连获取一个新的连接。 showImg(https://segmentfault.com/img/remote/1460000017987884?w=800&h=536); 前言 说道心跳这个词大家都不陌生,当然不是指男女...
阅读 966·2023-04-25 14:20
阅读 1815·2021-11-24 10:20
阅读 3729·2021-11-11 16:55
阅读 2739·2021-10-14 09:42
阅读 3435·2019-08-30 15:56
阅读 1054·2019-08-30 15:55
阅读 1018·2019-08-30 15:44
阅读 729·2019-08-29 11:28