本地key-value数据存储结构如何实现聊天记录的分页加载

最近在做一个聊天工具的需求,遇到一个这样的场景:

所有的聊天记录都是存储在APP本地的,而本地使用的是数据库是以 key-value 形式保存的。

刚开始的设想很简单,我把 「聊天id」 当做 key , 把 「聊天记录」 当做 value 存起来,在用户进入聊天页面时,我直接查询出当前会话的所有记录就行了。

这当然符合逻辑,并且也能正常工作,但是当聊天记录比较庞大的时候就会出现问题:

太过早远的历史记录被阅读的几率很小,并不需要一并读取出来。

一般用户需要阅读的记录就是最新的那么几十条,可是现在一进入聊天页面就把所有消息一股脑的读取出来了,这样有点浪费资源,于是我想到了分页加载。

刚开始的时候没啥思路,去Google了解了一下普通数据库是实现分页加载的...但是查到的都是一些SQL语句,教你如何分页查询数据...

但是由于本地使用的只是简单的key-value结构存储,并不是完整的数据库,所以并不能简单的通过sql查询来实现分页加载的效果...

于是我开始刷起了微信,打算看看它是怎么做的,刷着刷着还真发现一点东西:

当你滑动查看聊天记录的时候,如果聊天记录加载分页了,记录上面就会带上时间(这个逻辑是我瞎猜的,不过给了我一点灵感)
image

时间?!我是不是可以在 「聊天id」 后面加上 「时间」 来组成一个key呢?

大概的思路如下:

1.首先将key改成 「聊天id+时间」 的形式,这样聊天记录就可以按照时间进行划分
2.时间的划分是有规律的,比如我们设定存储的间隔是三分钟,这样我们就可以通过当前key,往前推三分钟来得到上一个key

举个例子,当前的key是 「聊天id2020-0607-1059」 那么上个key就是 「聊天id2020-0607-1056」。

他们间隔为3分钟。

听上去似乎挺靠谱的,但实际做起来还是有问题:

1.用户并不会一直和人聊天,所以往前推时间来得到的 key 中并不一定有值,可能需要往前推好几次,也就是查询好几次才能得到聊天记录。
2.如果只是单纯的往前推时间,我们并不知道什么时候数据已经被查完了。

虽然有问题,但是我们用 「聊天id+参数」 的形式来做分页说明是可行的。

那既然参数用时间不行,我们就换成别的,例如我们构造一个自增的id。

你可以自定义聊天记录存储的时机,只是每次存储的时候都是使用 「聊天id+自增id」 作为 key 来存储。

举个例子:

1.初始 id 为1,我们每30条聊天记录存储一次

2.存储的 自增id 为上一个 自增id 加1,然后和 聊天id 组成 key

我们再看上面的两个问题,会发现都已经被解决了。

1.因为只要存了,那肯定是有记录

2.初始id是1,所以我们只要查到 1,就表示所有数据都被查完了

这样看起来似乎完美的解决了问题,但是...

设想一下这样的场景:

用户有两台手机,两台手机上都存储着聊天记录,这个时候需要将两台手机上的聊天记录合并在一起,如果你的 key 只是用 自增id 构造的话,那么聊天记录的时间顺序处理就会变得很麻烦

所以,为了解决这个场景,我们的 key 还是得用时间去构造,这样就可以方便我们做聊天记录合并时的排序。

但是上面的问题该如何解决呢?

我的解决方式是引入一张新的表,表的 key 是 「聊天id」,而值就是 「聊天id+时间」 也就是查询聊天记录表时需要的 key ,那我们的整个加载流程就变成了这样:

1.进入聊天页面后,我们先通过 「聊天id」 查出 聊天记录表 所对应的 key 列表
2.使用 key列表 去分页查询 聊天记录

这样的话,上面说的两个问题也被解决了,并且因为我们的key上带了时间,可以提高我们在消息合并时的效率。

结尾

以上就是我对本地key-value数据库如何实现聊天记录分页加载的思考和分享,其实知道了这个思路之后,实现起来是没有什么难点的。

如果大家有任何问题,都可以在评论区留言,欢迎讨论,一起成长。

谢谢~

最后编辑于
©著作权归作者所有,转载或内容合作请联系作者
  • 序言:七十年代末,一起剥皮案震惊了整个滨河市,随后出现的几起案子,更是在滨河造成了极大的恐慌,老刑警刘岩,带你破解...
    沈念sama阅读 157,298评论 4 360
  • 序言:滨河连续发生了三起死亡事件,死亡现场离奇诡异,居然都是意外死亡,警方通过查阅死者的电脑和手机,发现死者居然都...
    沈念sama阅读 66,701评论 1 290
  • 文/潘晓璐 我一进店门,熙熙楼的掌柜王于贵愁眉苦脸地迎上来,“玉大人,你说我怎么就摊上这事。” “怎么了?”我有些...
    开封第一讲书人阅读 107,078评论 0 237
  • 文/不坏的土叔 我叫张陵,是天一观的道长。 经常有香客问我,道长,这世上最难降的妖魔是什么? 我笑而不...
    开封第一讲书人阅读 43,687评论 0 202
  • 正文 为了忘掉前任,我火速办了婚礼,结果婚礼上,老公的妹妹穿的比我还像新娘。我一直安慰自己,他们只是感情好,可当我...
    茶点故事阅读 52,018评论 3 286
  • 文/花漫 我一把揭开白布。 她就那样静静地躺着,像睡着了一般。 火红的嫁衣衬着肌肤如雪。 梳的纹丝不乱的头发上,一...
    开封第一讲书人阅读 40,410评论 1 211
  • 那天,我揣着相机与录音,去河边找鬼。 笑死,一个胖子当着我的面吹牛,可吹牛的内容都是我干的。 我是一名探鬼主播,决...
    沈念sama阅读 31,729评论 2 310
  • 文/苍兰香墨 我猛地睁开眼,长吁一口气:“原来是场噩梦啊……” “哼!你这毒妇竟也来了?” 一声冷哼从身侧响起,我...
    开封第一讲书人阅读 30,412评论 0 194
  • 序言:老挝万荣一对情侣失踪,失踪者是张志新(化名)和其女友刘颖,没想到半个月后,有当地人在树林里发现了一具尸体,经...
    沈念sama阅读 34,124评论 1 239
  • 正文 独居荒郊野岭守林人离奇死亡,尸身上长有42处带血的脓包…… 初始之章·张勋 以下内容为张勋视角 年9月15日...
    茶点故事阅读 30,379评论 2 242
  • 正文 我和宋清朗相恋三年,在试婚纱的时候发现自己被绿了。 大学时的朋友给我发了我未婚夫和他白月光在一起吃饭的照片。...
    茶点故事阅读 31,903评论 1 257
  • 序言:一个原本活蹦乱跳的男人离奇死亡,死状恐怖,灵堂内的尸体忽然破棺而出,到底是诈尸还是另有隐情,我是刑警宁泽,带...
    沈念sama阅读 28,268评论 2 251
  • 正文 年R本政府宣布,位于F岛的核电站,受9级特大地震影响,放射性物质发生泄漏。R本人自食恶果不足惜,却给世界环境...
    茶点故事阅读 32,894评论 3 233
  • 文/蒙蒙 一、第九天 我趴在偏房一处隐蔽的房顶上张望。 院中可真热闹,春花似锦、人声如沸。这庄子的主人今日做“春日...
    开封第一讲书人阅读 26,014评论 0 8
  • 文/苍兰香墨 我抬头看了看天上的太阳。三九已至,却和暖如春,着一层夹袄步出监牢的瞬间,已是汗流浃背。 一阵脚步声响...
    开封第一讲书人阅读 26,770评论 0 192
  • 我被黑心中介骗来泰国打工, 没想到刚下飞机就差点儿被人妖公主榨干…… 1. 我叫王不留,地道东北人。 一个月前我还...
    沈念sama阅读 35,435评论 2 269
  • 正文 我出身青楼,却偏偏与公主长得像,于是被迫代替她去往敌国和亲。 传闻我的和亲对象是个残疾皇子,可洞房花烛夜当晚...
    茶点故事阅读 35,312评论 2 260