针对永久不过期的key 批量设置过期时间

问题需求：
　　redis内存暴增，后来发现有很多设置永久不过期。

解决：查找出来之后针对前缀批量设置过期时间 （过期时间与开发沟通 保证服务不受影响）

 来源于网上杨一的代码   正好解决了我遇到的问题 在这里记录一下。 

1 # encoding: utf-8

 import redis

 import random

 import string

 import time

 pool = redis.ConnectionPool(host='127.0.0.1', port=6379, password="", db=0)

 r = redis.Redis(connection_pool=pool)

 def random_str():

     return ''.join(random.choice(string.ascii_letters + string.digits) for _ in range(7))

 def init_keys():

     start_time = time.time()

     for i in xrange(0, 20):

         key_name = 'dba_'+str(i)

         value_name = random_str()

         r.set(key_name, value_name)

     print 'initial keys successfully,use time:', time.time() - start_time

 def del_keys_without_pipe():

     start_time = time.time()

     result_length = 0

     for key in r.scan_iter(match='rawdata_lastStatus_0015000200*', count=1000):

         r.delete(key)

         result_length += 1

     print "normal ways end at:", time.time() - start_time

     print "normal ways delete numbers:", result_length

 def del_keys_with_pipe():

     start_time = time.time()

     result_length = 0

     pipe = r.pipeline()

     for key in r.scan_iter(match='rawdata_*_otherTrades', count=1000):

         pipe.expire(key,120)

         result_length += 1

         if result_length % 1000 == 0:

             pipe.execute()

         time.sleep(1)

     pip_time = time.time()

     print "use pipeline scan time ", time.time() - start_time

     pipe.execute()

     print "use pipeline end at:", time.time() - pip_time

     print "use pipeline ways delete numbers:", result_length

 def main():

 #    init_keys()

 #    del_keys_without_pipe()

 #    init_keys()

     del_keys_with_pipe()

 if __name__ == '__main__':

     main()

针对永久不过期的key 批量设置过期时间的更多相关文章

python redis 批量设置过期key
在使用 Redis.Codis 时,我们经常需要做一些批量操作,通过连接数据库批量对 key 进行操作: 关于未过期: 1.常有大批量的key未设置过期,导致内存一直暴增 2.rd需求扫描出这些ke ...
redis批量设置过期时间
Redis 中有删除单个 Key 的指令 DEL,但好像没有批量删除 Key 的指令,不过我们可以借助 Linux 的 xargs 指令来完成这个动作.代码如下: redis-cli keys &qu ...
如果有大量的 key 需要设置同一时间过期，一般需要注意什么？
如果大量的 key 过期时间设置的过于集中,到过期的那个时间点,redis 可能会出现短暂的卡顿现象.一般需要在时间上加一个随机值,使得过期时间分散一些.
redis文档翻译_key设置过期时间
Available since 1.0.0. 使用開始版本号1.01 Time complexity: O(1) 时间复杂度O(1) 出处:http://blog.csdn.net/colum ...
redis数据库如何批量删除键和设置过期时间？
我们可以借助Linux中的xargs,在终端中执行命令来实现这两个功能. 一.批量删除键批量删除以"key"开头key的方法,需要借助Linux中的xargs,在终端中执行以下命 ...
redis中的key设置过期时间
EXPIRE key seconds 为给定 key 设置生存时间,当 key 过期时(生存时间为 0 ),它会被自动删除. 在 Redis 中,带有生存时间的 key 被称为『易失的 ...
redis 一二事 - 设置过期时间，以文件夹形式展示key显示缓存数据
在使用redis时,有时回存在大量数据的时候,而且分类相同,ID相同可以使用hset来设置,这样有一个大类和一个小分类和一个value组成但是hset不能设置过期时间过期时间只能在set上设置 ...
查询redis中没有设置过期时间的key
#!/bin/sh ## 该脚本用来查询redis集群中,哪些key是没有设置过期时间,对应只需要修改redis的其中一个实例的 host和port ## 脚本会自动识别出该集群的所有实例,并查出对应 ...
redis可以设置过期key回调实现延时队列
<dependency> <groupId>org.springframework.boot</groupId> <artifactId>spring- ...

随机推荐

Apache JMeter HTTPS(S) Test Script Recorder
参考Apache官网资料:http://jmeter.apache.org/usermanual/jmeter_proxy_step_by_step.pdf 1. 进入apache-jmeter-2. ...
HDU 4565 So Easy! 广义斐波拉数数论 (a+sqrt(b))^n%mod 模板
So Easy! Time Limit: 2000/1000 MS (Java/Others) Memory Limit: 32768/32768 K (Java/Others)Total Su ...
CF996B World Cup 思维第十四 *
World Cup time limit per test 1 second memory limit per test 256 megabytes input standard input outp ...
Python——最美丽的编程语言
之前总听别人说Python有多厉害,有多好,我是不以为然的.但是当我开始接触Python的时候,我就知道它被誉为最美编程语言不是没有道理的.简短的代码,清晰明了的逻辑,方便快捷的编程工具让它注定会大放 ...
微信小程序 select 下拉框组件
一.源码地址 https://github.com/imxiaoer/WeChatMiniSelect 二.效果图录屏图片质量较差,所以大家会看到残影(捂脸) 三.组件源码 1. select.wx ...
【Offer】[25] 【合并两个排序的链表】
题目描述思路分析测试用例 Java代码代码链接题目描述输入两个递增排序的链表,合并这两个链表并使新链表中的节点仍然是递增排序的.例如,输入图中的链表1和链表2,则合并之后的升序链表如链表3所 ...
每天学会一点点(JAVA基础)
1.什么是Java虚拟机?为什么Java被称作是“平台无关的编程语言”? 虚拟机是一个可以执行Java字节码的虚拟机进程.Java源文件被编译成能被Java虚拟机执行的字节码文件. Java被设计成允 ...
BeanCopier类
网上学习了一番BeanCopier类. cglib是一款比较底层的操作java字节码的框架. 下面通过拷贝bean对象来测试BeanCopier的特性: public class OrderEntit ...
JAVA中的内存们
我们知道,计算机CPU和内存的交互是最频繁的,内存是我们的高速缓存区,用户磁盘和CPU的交互,而CPU运转速度越来越快,磁盘远远跟不上CPU的读写速度,才设计了内存,用户缓冲用户IO等待导致CPU的等 ...
DNA sequence（映射+BFS）
Problem Description The twenty-first century is a biology-technology developing century. We know tha ...

针对永久不过期的key 批量设置过期时间

针对永久不过期的key 批量设置过期时间的更多相关文章

随机推荐

热门专题