java - 如何使用 Redis 跟踪短期和长期的移动用户历史记录

Question

我们的移动应用程序跟踪用户历史记录(历史事件预定义了操作和日期)

报告用户历史的每个移动设备都可以检索它。

我想在 Redis 上使用最新的历史记录(比如说 100 条记录)进行快速检索，并在 100 条记录后将旧数据移动到某个数据源。

1. 您认为 Redis 适合短期历史检索吗？
2. 您会使用哪个数据源来保存最早的历史以供检索？

根据您的经验得出的其他想法？谢谢。

Answer 1

是的，Redis 是短期历史行为的绝佳选择。 LIST是很好看的数据结构:

1. 快速插入有序数据(O(1) 的 LPUSH)
2. 快速选择(LRANGE 为 O(S+N))
3. 低内存消耗(实际上是 Redis 中最低的——每个列表项仅 21 字节开销)

您还可以使用某种 cron 作业来获取旧数据并将其插入 SQL 之类的数据库。使用 LUA 脚本获取日志尾部:

local ret = {}
while tonumber(redis.call('llen', KEYS[1])) > tonumber(ARGV[1]) do
   table.insert(ret, redis.call('rpop', KEYS[1]))
end
return ret

其中 KEY 是您的 LIST 键，第一个参数是要处理的尾部大小。此 LUA 脚本自动切断(并返回)您所有超过 ARGV 1 的日志条目.下一步很简单 foreach by list 并插入到 SQL 数据库。

当用户想要获取他的所有历史记录时(在伪代码中，require 变量是用户查询的总记录数):

ret = redis.call('LRANGE', 'myKey', 0, require)
require = require - length(ret)
if (require > 0) {
    ret += db.query('SELECT ... LIMIT ' + require)
}