如何利用redis key过期事件实现过期提醒

简单定时任务解决方案:使用redis的keyspace notifications
需要注意此功能是在redis
2.8版本以后推出的,因此你服务器上的reids最少要是2.8版本以上;

1、当一个业务触发以后需要启动一个定时任务,在指定时间内再去执行一个任务

redis自2.8.0之后版本提供Keyspace Notifications功能,允许客户订阅Pub /
Sub频道,以便以某种方式接收影响Redis数据集的事件。

2、redis的keyspace notifications
会在key失效后发送一个事件,监听此事件的的客户端就可以收到通知

可能收到的事件的例子如下:
所有影响给定键的命令。
所有接收LPUSH操作的密钥。
所有密钥在数据库中过期0。

1、修改reids配置文件【window系统配置文件为:redis.windows.conf 】

因为 Redis 目前的订阅与发布功能采取的是发送即忘(fire and forget)策略,
所以如果你的程序需要可靠事件通知(reliable notification of events),
那么目前的键空间通知可能并不适合你:当订阅事件的客户端断线时,
它会丢失所有在断线期间分发给它的事件。并不能确保消息送达。未来有计划允许更可靠的事件传递,但可能这将在更一般的层面上解决,或者为Pub
/ Sub本身带来可靠性,或者允许Lua脚本拦截Pub /
Sub消息来执行诸如推送将事件列入清单。

redis默认不会开启keyspace notifications,因为开启后会对cpu有消耗

事件类型

对于每个修改数据库的操作,键空间通知都会发送两种不同类型的事件消息:keyspace
和 keyevent。以 keyspace 为前缀的频道被称为键空间通知(key-space
notification), 而以 keyevent 为前缀的频道则被称为键事件通知(key-event
notification)。

事件是用  __keyspace@DB__:KeyPattern 或者  __keyevent@DB__:OpsType 的格式来发布消息的。DB表示在第几个库;KeyPattern则是表示需要监控的键模式(可以用通配符,如:__key*__:*);OpsType则表示操作类型。因此,如果想要订阅特殊的Key上的事件,应该是订阅keyspace。比如说,对 0 号数据库的键 mykey 执行 DEL 命令时, 系统将分发两条消息, 相当于执行以下两个 PUBLISH 命令:PUBLISH __keyspace@0__:sampleKey delPUBLISH __keyevent@0__:del sampleKey订阅第一个频道 __keyspace@0__:mykey 可以接收 0 号数据库中所有修改键 mykey 的事件, 而订阅第二个频道 __keyevent@0__:del 则可以接收 0 号数据库中所有执行 del 命令的键。

备注:E:keyevent事件,事件以__keyevent@__为前缀进行发布;

开启配置

键空间通知通常是不启用的,因为这个过程会产生额外消耗。所以在使用该特性之前,请确认一定是要用这个特性的,然后修改配置文件,或使用config配置。相关配置项如下:

字符 发送通知
K 键空间通知,所有通知以keyspace@为前缀,针对Key
E 键事件通知,所有通知以keyevent@为前缀,针对event
g DEL 、 EXPIRE 、 RENAME 等类型无关的通用命令的通知
$ 字符串命令的通知
l 列表命令的通知
s 集合命令的通知
h 哈希命令的通知
z 有序集合命令的通知
x 过期事件:每当有过期键被删除时发送
e 驱逐事件:每当有键因为 maxmemory 政策而被删除时发送
A 参数 g$lshzxe 的别名,相当于是All

输入的参数中至少要有一个 K 或者 E , 否则的话, 不管其余的参数是什么,
都不会有任何通知被分发。上表中斜体的部分为通用的操作或者事件,而黑体则表示特定数据类型的操作。配置文件中修改
notify-keyspace-events
“Kx”,注意:这个双引号是一定要的,否则配置不成功,启动也不报错。例如,“Kx”表示想监控某个Key的失效事件。

也可以通过config配置:CONFIG set notify-keyspace-events Ex

Redis 使用以下两种方式删除过期的键:1.当一个键被访问时,程序会对这个键进行检查,如果键已经过期,那么该键将被删除。2.底层系统会在后台查找并删除那些过期的键,从而处理那些已经过期、但是不会被访问到的键。当过期键被以上两个程序的任意一个发现、 并且将键从数据库中删除时, Redis 会产生一个 expired 通知。Redis 并不保证生存时间变为 0 的键会立即被删除: 如果程序没有访问这个过期键, 或者带有生存时间的键非常多的话, 那么在键的生存时间变为 0 , 直到键真正被删除这中间, 可能会有一段比较显著的时间间隔。因此, Redis 产生 expired 通知的时间为过期键被删除的时候, 而不是键的生存时间变为 0 的时候。

由于通知收到的是redis
key,value已经过期,无法收到,所以需要在key上标记业务数据。

x:过期事件,当某个键过期并删除时会产生该事件;

实现步骤:

1.修改配置:键空间通知功能耗费CPU,默认关闭,需要修改配置文件redis.conf或
操作CONFIG SET命令,设置notify-keyspace-events选项,来启用或关闭该功能。

2.对Redis实例进行发布订阅,指定监听类和监听事件类型

3.监听类继承JedisPubSub,实现相应操作;

4.客户端进行操作,以触发订阅事件发生。

notify-keyspace-events ""

notify-keyspace-events "Ex"

代码实例

<dependency>            <groupId>redis.clients</groupId>            <artifactId>jedis</artifactId>            <version>2.6.2</version>        </dependency>

保存配置后,重启Redis服务,使配置生效

配置和订阅

package cn.slimsmart.redis.demo.nofity;import redis.clients.jedis.Jedis;import redis.clients.jedis.JedisPool;import redis.clients.jedis.JedisPoolConfig;import redis.clients.jedis.JedisPubSub;import java.util.List;public class notifyTest {    public static void main(String[] args) {        JedisPool pool = new JedisPool(new JedisPoolConfig(), "127.0.0.1");        Jedis jedis = pool.getResource();        config;//建议在redis配置文件中设置        jedis.psubscribe(new KeyExpiredListener(), "__keyevent@0__:expired");//过期队列    }    private static void config(Jedis jedis){        String parameter = "notify-keyspace-events";        List<String> notify = jedis.configGet(parameter);        if(notify.get.equals("")){            jedis.configSet(parameter, "Ex"); //过期事件        }    }}class KeyExpiredListener extends JedisPubSub {    @Override    public void onPSubscribe(String pattern, int subscribedChannels) {        System.out.println("onPSubscribe " + pattern + " " + subscribedChannels);    }    @Override    public void onPMessage(String pattern, String channel, String message) {    System.out.println(        "pattern = [" + pattern + "], channel = [" + channel + "], message = [" + message + "]");    //收到消息 key的键值,处理过期提醒    }}

6. spring boot 处理方式

1、修改Redis配置

把# notify-keyspace-events Ex 前面的注释去掉,然后重启redis

2、pom文件添加

<dependency><groupId>org.springframework.boot</groupId><artifactId>spring-boot-starter-data-redis</artifactId></dependency>

3、添加redis监听

package com.example.demo.redis;import org.springframework.beans.factory.annotation.Autowired;import org.springframework.data.redis.connection.Message;import org.springframework.data.redis.connection.MessageListener;import org.springframework.data.redis.core.RedisTemplate;import org.springframework.stereotype.Component;
/** 可以换成KeyExpirationEventMessageListener */@Componentpublic class RedisMessageListener implements MessageListener {@Autowiredprivate RedisTemplate<String, String> redisTemplate;@Override//key 过期时调用public void onMessage(Message message, byte[] pattern) {System.out.println("onPMessage pattern " + pattern + " " + " " + message);String channel = new String(message.getChannel;String str =  redisTemplate.getValueSerializer().deserialize(message.getBody;System.out.println;}}4、配置redis监听key过期事件package com.example.demo.redis;import com.example.demo.DemoApplication;import org.springframework.beans.factory.annotation.Autowired;import org.springframework.context.annotation.Bean;import org.springframework.context.annotation.Configuration;import org.springframework.context.annotation.Import;import org.springframework.data.redis.connection.RedisConnectionFactory;import org.springframework.data.redis.listener.ChannelTopic;import org.springframework.data.redis.listener.RedisMessageListenerContainer;import org.springframework.data.redis.listener.adapter.MessageListenerAdapter;@Configuration//value 是启动类@Import( value = DemoApplication.class )public class PubsubConfiguration {@Autowiredprivate RedisMessageListener redisMessageListener;@Beanpublic ChannelTopic expiredTopic() {return new ChannelTopic("__keyevent@0__:expired");}@Beanpublic RedisMessageListenerContainer redisMessageListenerContainer(@Autowired RedisConnectionFactory redisConnectionFactory) {RedisMessageListenerContainer redisMessageListenerContainer = new RedisMessageListenerContainer();redisMessageListenerContainer.setConnectionFactory(redisConnectionFactory);redisMessageListenerContainer.addMessageListener(redisMessageListener, expiredTopic;return redisMessageListenerContainer;}}

4、经测试添加key=11,当其过期时,打印效果如下

onPMessage pattern [B@20d980fd 11
11

[root@chokingwin etc]#service redis-server restart /usr/local/redis/etc/redis.conf Stopping redis-server: [ OK ] Starting redis-server: [ OK ]

设置过期消息

package cn.slimsmart.redis.demo.nofity;import redis.clients.jedis.Jedis;import redis.clients.jedis.JedisPool;import redis.clients.jedis.JedisPoolConfig;public class TestJedis {    public static void main(String[] args) {        JedisPool pool = new JedisPool(new JedisPoolConfig(), "127.0.0.1");        Jedis jedis = pool.getResource();        jedis.setex("notify-task-001", 10,"empty");    }}

其他过期事件解决策略

window系统重启redis
,先切换到redis文件目录,然后关闭redis服务(redis-server
–service-stop),再开启(redis-server –service-start)

解决方案2

使用spring +
quartz定时任务(支持任务信息写入mysql,多节点分布式执行任务),下单成功后,生成一个30分钟后运行的任务,30分钟后检查订单状态,如果未支付,则进行处理

phpredis实现订阅Keyspace
notification,可实现自动取消订单,自动完成订单。以下为测试例子

解决方案3

将订单过期时间信息写入mysql,按分钟轮询查询mysql,如果超时则进行处理,效率差!时间精准度底!

创建4个文件,然后自行修改数据库和redis配置参数

解决方案4

使用Java的定时器,不支持高可用,设置定时器的节点挂掉或者重启,任务失效!

db.class.php

结论

推荐使用方案1和方案2

8.关于通道名称:__keyevent@0__:expired

通过Redis自带的redis-cli命令,我们可以在服务端通过命令行的方式直接操作。我们运行上面的示例代码,然后迅速切换到redis-cli命令中,建立一个生命周期很短暂的数据:
127.0.0.1:6379> set chaijunkun 123 PX 100
PX参数指定生命周期单位为毫秒,100即声明周期,即100毫秒。key为chaijunkun的数据,其值为123。
当执行语句后,回显:
OK

这时我们看实例程序的输出:
*=__keyevent@0__:expired=chaijunkun
从输出可以看出,之前指定的通配符为*,通配任何通道;之后是实际的通道名称:__keyevent@0__:expired,这里我们可以看到订阅收到了一个keyevent位于数据库0,事件类型为:expired,是一个过期事件;最后是chaijunkun,这个是过期数据的key。
在官方文档中,keyevent通道的格式永远是这样的:
__keyevent@<db>__:prefix
对于数据过期事件,我们在绑定订阅时通配模板也可以精确地写成:
__keyevent@*__:expired
通过示例代码,我们可以看到确实印证了之前的构想,实现了数据过期的事件触发或者说回调。

参考文章:

'127.0.0.1', 'username'=>'root', 'password'=>'168168', 'database'=>'test', 'port'=>3306, ); $host = $config['host']; //主机地址 $username = $config['username'];//用户名 $password = $config['password'];//密码 $database = $config['database'];//数据库 $port = $config['port']; //端口号 $this->mysqli = new mysqli($host, $username, $password, $database, $port); } /** * 数据查询 * @param $table 数据表 * @param null $field 字段 * @param null $where 条件 * @return mixed 查询结果数目 */ public function select($table, $field = null, $where = null) { $sql = "SELECT * FROM `{$table}`"; //echo $sql;exit; if  { $field = '`' . implode . '`'; $sql = str_replace; } if  { $sql = $sql . ' WHERE ' . $where; } $this->result = $this->mysqli->query; return $this->result; } /** * @return mixed 获取全部结果 */ public function fetchAll() { return $this->result->fetch_all; } /** * 插入数据 * @param $table 数据表 * @param $data 数据数组 * @return mixed 插入ID */ public function insert { foreach ($data as $key => $value) { $data[$key] = $this->mysqli->real_escape_string; } $keys = '`' . implode('`,`', array_keys . '`'; $values = '\'' . implode("','", array_values . '\''; $sql = "INSERT INTO `{$table}`VALUES"; $this->mysqli->query; return $this->mysqli->insert_id; } /** * 更新数据 * @param $table 数据表 * @param $data 数据数组 * @param $where 过滤条件 * @return mixed 受影响记录 */ public function update($table, $data, $where) { foreach ($data as $key => $value) { $data[$key] = $this->mysqli->real_escape_string; } $sets = array(); foreach ($data as $key => $value) { $kstr = '`' . $key . '`'; $vstr = '\'' . $value . '\''; array_push($sets, $kstr . '=' . $vstr); } $kav = implode; $sql = "UPDATE `{$table}` SET {$kav} WHERE {$where}"; $this->mysqli->query; return $this->mysqli->affected_rows; } /** * 删除数据 * @param $table 数据表 * @param $where 过滤条件 * @return mixed 受影响记录 */ public function delete { $sql = "DELETE FROM `{$table}` WHERE {$where}"; $this->mysqli->query; return $this->mysqli->affected_rows; }}

$order_sn,'status'=>0,'createtime'=>date]; $mysql->insert;}$list = [$order_sn,$use_mysql];$key = implode;$redis->setex; //3秒后回调$test_del = false; //测试删除缓存后是否会有过期回调。结果:没有回调if{ //sleep; $redis->delete;}echo $order_sn;/* * 测试其他key会不会有回调,结果:有回调 * $k = 'test'; * $redis2->set; * $redis2->expire; **/

psubscribe.php

setOption();//当key过期的时候就看到通知,订阅的key __keyevent@__:expired 这个格式是固定的,db代表的是数据库的编号,由于订阅开启之后这个库的所有key过期时间都会被推送过来,所以最好单独使用一个数据库来进行隔离$redis->psubscribe(array('__keyevent@'.$redis_db.'__:expired'), 'keyCallback');// 回调函数,这里写处理逻辑function keyCallback($redis, $pattern, $channel, $msg){ echo PHP_EOL; echo "Pattern: $pattern\n"; echo "Channel: $channel\n"; echo "Payload: $msg\n\n"; $list = explode; $order_sn = isset?$list[0]:'0'; $use_mysql = isset?$list[1]:'0'; if{ require_once 'db.class.php'; $mysql = new \mysql; $where = "ordersn = '".$order_sn."'"; $mysql->select; $finds=$mysql->fetchAll; if(isset && $finds[0]['status']==0){ $data = array; $where = " id = ".$finds[0]['id']; $mysql->update; } }}//或者/*$redis->psubscribe(array('__keyevent@'.$redis_db.'__:expired'), function ($redis, $pattern, $channel, $msg){ echo PHP_EOL; echo "Pattern: $pattern\n"; echo "Channel: $channel\n"; echo "Payload: $msg\n\n"; //................});*/

Redis2.class.php

redis = new Redis(); $this->redis->connect; //连接Redis $this->redis->auth; //密码验证 $this->redis->select; //选择数据库 } public function setex { return $this->redis->setex; } public function set { return $this->redis->set; } public function get { return $this->redis->get; } public function expire($key = null, $time = 0) { return $this->redis->expire; } public function psubscribe, $callback) { $this->redis->psubscribe; } public function setOption() { $this->redis->setOption(\Redis::OPT_READ_TIMEOUT, -1); } public function lRange { return $this->redis->lRange; } public function lPush($key, $value1, $value2 = null, $valueN = null ){ return $this->redis->lPush($key, $value1, $value2 = null, $valueN = null ); } public function delete($key1, $key2 = null, $key3 = null) { return $this->redis->delete($key1, $key2 = null, $key3 = null); }}

window系统测试方法:先在cmd命令界面运行psubscribe.php,然后网页打开index.php。

使监听后台始终运行

有个问题 做到这一步,利用 phpredis 扩展,成功在代码里实现对过期 Key
的监听,并在
psCallback()里进行回调处理。开头提出的两个需求已经实现。可是这里有个问题:redis
在执行完订阅操作后,终端进入阻塞状态,需要一直挂在那。且此订阅脚本需要人为在命令行执行,不符合实际需求。

实际上,我们对过期监听回调的需求,是希望它像守护进程一样,在后台运行,当有过期事件的消息时,触发回调函数。使监听后台始终运行
希望像守护进程一样在后台一样,

Linux中有一个nohup命令。功能就是不挂断地运行命令。同时nohup把脚本程序的所有输出,都放到当前目录的nohup.out文件中,如果文件不可写,则放到/nohup.out
文件中。那么有了这个命令以后,不管我们终端窗口是否关闭,都能够让我们的php脚本一直运行。

编写psubscribe.php文件:

setOption();//当key过期的时候就看到通知,订阅的key __keyevent@__:expired 这个格式是固定的,db代表的是数据库的编号,由于订阅开启之后这个库的所有key过期时间都会被推送过来,所以最好单独使用一个数据库来进行隔离$redis->psubscribe(array('__keyevent@'.$redis_db.'__:expired'), 'keyCallback');// 回调函数,这里写处理逻辑function keyCallback($redis, $pattern, $channel, $msg){ echo PHP_EOL; echo "Pattern: $pattern\n"; echo "Channel: $channel\n"; echo "Payload: $msg\n\n"; $list = explode; $order_sn = isset?$list[0]:'0'; $use_mysql = isset?$list[1]:'0'; if{ require_once 'db.class.php'; $mysql = new \mysql; $where = "ordersn = '".$order_sn."'"; $mysql->select; $finds=$mysql->fetchAll; if(isset && $finds[0]['status']==0){ $data = array; $where = " id = ".$finds[0]['id']; $mysql->update; } }}//或者/*$redis->psubscribe(array('__keyevent@'.$redis_db.'__:expired'), function ($redis, $pattern, $channel, $msg){ echo PHP_EOL; echo "Pattern: $pattern\n"; echo "Channel: $channel\n"; echo "Payload: $msg\n\n"; //................});*/

注意:我们在开头,申明 php 编译器的路径:

#! /usr/bin/env php

这是执行 php 脚本所必须的。

然后,nohup 不挂起执行 psubscribe.php,注意 末尾的 &

[root@chokingwin HiGirl]# nohup ./psubscribe.php & [1] 4456 nohup: ignoring input and appending output to `nohup.out'

说明:脚本确实已经在 4456 号进程上跑起来。

查看下nohup.out cat 一下 nohuo.out,看下是否有过期输出:

[root@chokingwin HiGirl]# cat nohup.out Pattern:__keyevent@0__:expired Channel: __keyevent@0__:expired Payload: name

运行index.php ,3秒后效果如上即成功

遇到问题:使用命令行模式开启监控脚本 ,一段时间后报错 :Error while
sending QUERY packet. PID=xxx

解决方法:由于等待消息队列是一个长连接,而等待回调前有个数据库连接,数据库的wait_timeout=28800,所以只要下一条消息离上一条消息超过8小时,就会出现这个错误,把wait_timeout设置成10,并且捕获异常,发现真实的报错是
MySQL server has gone away
,所以只要处理完所有业务逻辑后主动关闭数据库连接,即数据库连接主动close掉就可以解决问题

Yii::$app->db->close();

 ps -aux|grep psubscribe.phpa:显示所有程序u:以用户为主的格式来显示x:显示所有程序,不以终端机来区分

查看jobs进程ID:[ jobs -l ]命令

www@iZ232eoxo41Z:~/tinywan $ jobs -l[1]- 1365 Stopped  sudo nohup psubscribe.php > /dev/null 2>&1 [2]+ 1370 Stopped  sudo nohup psubscribe.php > /dev/null 2>&1

终止后台运行的进程方法:

kill -9 进程号

清空 nohup.out文件方法:

cat /dev/null > nohup.out

新澳门萄京娱乐场,我们在使用nohup的时候,一般都和&配合使用,但是在实际使用过程中,很多人后台挂上程序就这样不管了,其实这样有可能在当前账户非正常退出或者结束的时候,命令还是自己结束了。

所以在使用nohup命令后台运行命令之后,我们需要做以下操作:

1.先回车,退出nohup的提示。

2.然后执行exit正常退出当前账户。3.然后再去链接终端。使得程序后台正常运行。

我们应该每次都使用exit退出,而不应该每次在nohup执行成功后直接关闭终端。这样才能保证命令一直在后台运行。

总结

以上所述是小编给大家介绍的使用PHP+Redis实现延迟任务,实现自动取消订单功能,希望对大家有所帮助,如果大家有任何疑问请给我留言,小编会及时回复大家的。在此也非常感谢大家对脚本之家网站的支持!如果你觉得本文对你有帮助,欢迎转载,烦请注明出处,谢谢!

发表评论

电子邮件地址不会被公开。 必填项已用*标注