摘要:優(yōu)化結(jié)果計算機(jī)器六代內(nèi)存時間秒優(yōu)化版本使用存放用戶,通過命令獲取下級時間復(fù)雜度,是所有給定集合的成員數(shù)量之和。
0x01
我們有一個業(yè)務(wù)場景是需要將用戶邀請的下級用戶根據(jù)其用戶等級給統(tǒng)計出來(不止統(tǒng)計一級).
現(xiàn)有的解決方案:
mysql中一張用戶表
主要的3個字段:user_id, parent _id,level,
典型的一個樹形結(jié)構(gòu).
因為數(shù)據(jù)量很大,查詢次數(shù)很多,所以重算這數(shù)據(jù)基本上重算一次要花個幾分鐘.
優(yōu)化版本1:
假如我將沒所有用戶對應(yīng)的所有直接下級用戶的id取出,存放到redis中的數(shù)組,像這樣
U:110->[111,112,113,...]
將用戶等級也放到redis中,像這樣
L:110->0
然后通過map的方式取到下級的下級用戶并合并起來,再通過用戶等級進(jìn)行分組。
users.stream.map(u-> jedis.lrange(0,-1)).flatMap(u-> u).collect(grouppingBy(u-> jedis.get("L:" + u)))...
LRANGE
時間復(fù)雜度:O(S+N),?S?為偏移量?start?,?N?為指定區(qū)間內(nèi)元素的數(shù)量。`
優(yōu)化結(jié)果:
計算機(jī)器:I5 六代 8G內(nèi)存
時間:25秒
優(yōu)化版本2:
使用Set存放用戶,通過SUNION命令獲取下級ID
時間復(fù)雜度:O(N),?N?是所有給定集合的成員數(shù)量之和。
獲取當(dāng)前下級的用戶代碼則更簡單了,首先將當(dāng)前用戶通過CPU并行的方式把SET的key計算出來,然后通過SUNION將所有的用戶取出來:
private SetdownLevelAllUser(Set users) { return jedis.sunion(users.parallelStream().map(s -> "U:" + s ).collect(Collectors.toList()).toArray(new String[0])); }
這些用戶的等級都查出來,那就獲取他們的用戶等級并進(jìn)行分組.
private Map> groupUser(Set users) { return jedis.mget(users.parallelStream().map(u -> "L:" + u) .collect(Collectors.toList()).toArray(new String[0])) .parallelStream().collect(Collectors.groupingBy(r -> r)); }
主要功能都實現(xiàn)了,那么試試計算8級所花時間
public List
優(yōu)化結(jié)果:
總用戶數(shù)為:120W
計算機(jī)器:I5 六代 8G內(nèi)存
時間:4秒
好了,優(yōu)化完畢了,大神們還有什么高招,歡迎來指導(dǎo)!!!!!!
文章版權(quán)歸作者所有,未經(jīng)允許請勿轉(zhuǎn)載,若此文章存在違規(guī)行為,您可以聯(lián)系管理員刪除。
轉(zhuǎn)載請注明本文地址:http://systransis.cn/yun/65930.html
閱讀 3614·2021-11-23 09:51
閱讀 1487·2021-11-04 16:08
閱讀 3558·2021-09-02 09:54
閱讀 3624·2019-08-30 15:55
閱讀 2604·2019-08-30 15:54
閱讀 965·2019-08-29 16:30
閱讀 2053·2019-08-29 16:15
閱讀 2326·2019-08-29 14:05