redis:每天重置计数器。

我想使用 Redis 每天重置一个计数器。我对 Redis 还不熟悉,所以我想确认一下事务和管道是如何工作的。

以下代码是否确保在多进程环境中一直获得唯一的(日期、数字)组合,或者我需要使用 Redis 锁?

import datetime
import redis

r = redis.Redis(...)

def get_utc_date_now():
    return datetime.datetime.utcnow().date()

def get_daily_counter(r, dt_key='dt', counter_key='counter'):

    def incr_daily_number(pipe):
        dt_now = get_utc_date_now().isoformat()  # e.g.: "2014-10-18"
        dt = pipe.get(dt_key)
        pipe.multi()
        if dt != dt_now:
            pipe.set(dt_key, dt_now)
            pipe.set(counter_key, 0)
        pipe.get(dt_key)
        pipe.incr(counter_key)

    result = r.transaction(incr_daily_number, dt_key)
    return result[-2:]

# Get the (dt, number) couple
# 2014-10-18, 1
# 2014-10-18, 2
# etc.
dt, number = get_daily_counter(r)

更新

尝试使用 LUA 脚本:

r = redis.Redis(...)

incr_with_reset_on_change_lua_script = """

local dt = redis.call('GET', KEYS[2])
if dt ~= ARGV[2] then
  redis.call('MSET', KEYS[1], ARGV[1], KEYS[2], ARGV[2])
end
return redis.call('INCR', KEYS[1])

"""
# Incr KEYS1 but reset first if KEYS2 has changed.
incr_with_reset_on_change = r.register_script(incr_with_reset_on_change_lua_script)

counter_key = 'dcounterA'
watch_key = 'dcounterA_dt'
watch_value = get_utc_date_now().isoformat()

number = incr_with_reset_on_change(keys=[counter_key, watch_key], args=[reset_value, watch_value])
点赞
用户1114486
用户1114486

考虑到在午夜同时进行的两个并发事务。它们都可以执行get(dt_key),但其中一个将首先执行MULTI/EXEC块。它将重置计数器,设置新日期,增加计数器。第二个也会进入它的MULTI/EXEC块,但由于'dt'的值已经改变,执行将失败,然后会再次调用incr_daily_number。这一次,get(dt_key)将返回新日期,因此在执行MULTI/EXEC块时,计数器将被增加而没有重置。两个事务将以不同的计数器值返回新日期。

因此,我相信这里没有竞争条件,并且(date,number)是唯一的。

您也可以使用服务器端的Lua脚本来实现这一点(其执行始终是原子性的)。通常更方便。

请注意,实际上不存在Redis锁。 API中提供的锁定机制是由Python客户端提供的 - 而不是Redis服务器。如果您查看其实现,您会意识到它也是基于SETNX + WATCH / MULTI / EXEC块或Lua脚本的。

2014-10-18 22:23:18