摘要:优化结果计算机器六代内存时间秒优化版本使用存放用户,通过命令获取下级时间复杂度,是所有给定集合的成员数量之和。
0x01
我们有一个业务场景是需要将用户邀请的下级用户根据其用户等级给统计出来(不止统计一级).
现有的解决方案:
mysql中一张用户表
主要的3个字段:user_id, parent _id,level,
典型的一个树形结构.
因为数据量很大,查询次数很多,所以重算这数据基本上重算一次要花个几分钟.
优化版本1:
假如我将没所有用户对应的所有直接下级用户的id取出,存放到redis中的数组,像这样
U:110->[111,112,113,...]
将用户等级也放到redis中,像这样
L:110->0
然后通过map的方式取到下级的下级用户并合并起来,再通过用户等级进行分组。
users.stream.map(u-> jedis.lrange(0,-1)).flatMap(u-> u).collect(grouppingBy(u-> jedis.get("L:" + u)))...
LRANGE
时间复杂度:O(S+N), S 为偏移量 start , N 为指定区间内元素的数量。`
优化结果:
计算机器:I5 六代 8G内存
时间:25秒
优化版本2:
使用Set存放用户,通过SUNION命令获取下级ID
时间复杂度:O(N), N 是所有给定集合的成员数量之和。
获取当前下级的用户代码则更简单了,首先将当前用户通过CPU并行的方式把SET的key计算出来,然后通过SUNION将所有的用户取出来:
private SetdownLevelAllUser(Set users) { return jedis.sunion(users.parallelStream().map(s -> "U:" + s ).collect(Collectors.toList()).toArray(new String[0])); }
这些用户的等级都查出来,那就获取他们的用户等级并进行分组.
private Map> groupUser(Set users) { return jedis.mget(users.parallelStream().map(u -> "L:" + u) .collect(Collectors.toList()).toArray(new String[0])) .parallelStream().collect(Collectors.groupingBy(r -> r)); }
主要功能都实现了,那么试试计算8级所花时间
public List
优化结果:
总用户数为:120W
计算机器:I5 六代 8G内存
时间:4秒
好了,优化完毕了,大神们还有什么高招,欢迎来指导!!!!!!
文章版权归作者所有,未经允许请勿转载,若此文章存在违规行为,您可以联系管理员删除。
转载请注明本文地址:https://www.ucloud.cn/yun/65930.html
阅读 3567·2021-11-23 09:51
阅读 1439·2021-11-04 16:08
阅读 3529·2021-09-02 09:54
阅读 3591·2019-08-30 15:55
阅读 2573·2019-08-30 15:54
阅读 925·2019-08-29 16:30
阅读 2029·2019-08-29 16:15
阅读 2293·2019-08-29 14:05