redis 简单整理——redis 的键管理[七]

前言

简单整理一下redis的键管理。

正文

单个键管理

  1. 键重命名
rename key newkey

为了防止被强行rename,Redis提供了renamenx命令,确保只有newKey 不存在时候才被覆盖,例如下面操作renamenx时,newkey=python已经存在, 返回结果是0代表没有完成重命名,所以键java和python的值没变。

  1. 随机返回一个键

randomkey

  1. 键过期

·expire key seconds:键在seconds秒后过期。

·expireat key timestamp:键在秒级时间戳timestamp后过期

ttl命令和pttl都可以查询键的剩余过期时间,但是pttl精度更高可以达到 毫秒级别,有3种返回值:

大于等于0的整数:键剩余的过期时间(ttl是秒,pttl是毫秒)。
·-1:键没有设置过期时间。
·-2:键不存在。

expireat命令可以设置键的秒级过期时间戳,例如如果需要将键hello在 2016-08-0100:00:00(秒级时间戳为1469980800)过期,可以执行如下操作:

127.0.0.1:6379> expireat hello 1469980800 (integer) 1

除此之外,Redis2.6版本后提供了毫秒级的过期方案:

·pexpire key milliseconds:键在milliseconds毫秒后过期。

·pexpireat key milliseconds-timestamp键在毫秒级时间戳timestamp后过期

但无论是使用过期时间还是时间戳,秒级还是毫秒级,在Redis内部最 终使用的都是pexpireat.

1)如果expire key的键不存在,返回结果为0:

127.0.0.1:6379> expire not_exist_key 30 (integer) 0

2)如果过期时间为负值,键会立即被删除,犹如使用del命令一样:

3)persist命令可以将键的过期时间清除

对于字符串类型键,执行set命令会去掉过期时间,这个问题很容易 在开发中被忽视。

redis 简单整理——redis 的键管理[七]

redis 简单整理——redis 的键管理[七]

setex命令作为set+expire的组合,不但是原子执行,同时减少了一次 网络通讯的时间。

迁移键功能非常重要,因为有时候我们只想把部分数据由一个Redis迁 移到另一个Redis(例如从生产环境迁移到测试环境),

Redis发展历程中提供了move、dump+restore、migrate三组迁移键的方法,它们的实现方式以及 使用的场景不太相同,下面分别介绍。

1.move key db

move命令用于在Redis内部进行数据迁移,Redis内部可 以有多个数据库,由于多个数据库功能后面会进行介绍,这里只需要知道 Redis内部可以有多个数据库,彼此在数据上是相互隔离的,move key db就 153
是把指定的键从源数据库移动到目标数据库中,但笔者认为多数据库功能不 建议在生产环境使用,所以这个命令读者知道即可

redis 简单整理——redis 的键管理[七]

  1. dump+restore
dump key 

restore key ttl value

dump+restore可以实现在不同的Redis实例之间进行数据迁移的功能,整 个迁移的过程分为两步:
1)在源Redis上,dump命令会将键值序列化,格式采用的是RDB格式。

2)在目标Redis上,restore命令将上面序列化的值进行复原,其中ttl参 数代表过期时间,如果ttl=0代表没有过期时间。

redis 简单整理——redis 的键管理[七]

有关dump+restore有两点需要注意:第一,整个迁移过程并非原子性 的,而是通过客户端分步完成的。

第二,迁移过程是开启了两个客户端连 接,所以dump的结果不是在源Redis和目标Redis之间进行传输

1)在源Redis上执行dump:

redis 简单整理——redis 的键管理[七]

2)在目标Redis上执行restore:

redis 简单整理——redis 的键管理[七]

伪代码:

redis 简单整理——redis 的键管理[七]

3)migrate

migrate host port key|"" destination-db timeout [copy] [replace] [keys key [key

migrate命令也是用于在Redis实例间进行数据迁移的,实际上migrate命 令就是将dump、restore、del三个命令进行组合,从而简化了操作流程。

migrate命令具有原子性,而且从Redis3.0.6版本以后已经支持迁移多个键的 功能,有效地提高了迁移效率.

第一,整个过程是原子执行的,不需要在多个Redis实例上开启 客户端的,只需要在源Redis上执行migrate命令即可。

第二,migrate命令的 数据传输直接在源Redis和目标Redis上完成的。

第三,目标Redis完成restore 后会发送OK给源Redis,源Redis接收后会根据migrate对应的选项来决定是否 在源Redis上删除对应的键

redis 简单整理——redis 的键管理[七]

下面对migrate的参数进行逐个说明:
·host:目标Redis的IP地址。

·port:目标Redis的端口。

·key|"":在Redis3.0.6版本之前,migrate只支持迁移一个键,所以此处是 要迁移的键,但Redis3.0.6版本之后支持迁移多个键,如果当前需要迁移多 个键,此处为空字符串""。

·destination-db:目标Redis的数据库索引,例如要迁移到0号数据库,这 157里就写0。
·timeout:迁移的超时时间(单位为毫秒)。
·[copy]:如果添加此选项,迁移后并不删除源键。
·[replace]:如果添加此选项,migrate不管目标Redis是否存在该键都会 正常迁移进行数据覆盖。
·[keys key[key...]]:迁移多个键,例如要迁移key1、key2、key3,此处填 写“keys key1 key2 key3”。

分为下面几种情况:

redis 简单整理——redis 的键管理[七]

redis 简单整理——redis 的键管理[七]

下面演示一下Redis3.0.6版本以后迁移多个键的功能。

127.0.0.1:6379> migrate 127.0.0.1 6380 "" 0 5000 keys key1 key2 key3 OK

简单介绍一下几种迁移键的区别:

redis 简单整理——redis 的键管理[七]

键遍历

Redis提供了两个命令遍历所有的键,分别是keys和scan,本节将对它们 介绍并简要分析。

keys pattern

这个pattern 是匹配字符的意思。

·*代表匹配任意字符。 ·代表匹配一个字符。 160
·[]代表匹配部分字符,例如[1,3]代表匹配1,3,[1-10]代表匹配1到10 的任意数字。 
·\x用来做转义,例如要匹配星号、问号需要进行转义。

同样可以删除一些键:

redis-cli keys video* | xargs redis-cli del

如果键太多,考虑到是单线程,很有可能会堵塞。

下面要介绍的scan命令渐进式的遍历所有键,可以有效防止阻塞

每次执行scan,可以想象成只扫描一个字典中的一部分键,直到将 字典中的所有键遍历完毕。scan的使用方法如下:

scan cursor [match pattern] [count number]

cursor是必需参数,实际上cursor是一个游标,第一次遍历从0开始,每 次scan遍历完都会返回当前游标的值,直到游标值为0,表示遍历结束。

·match pattern是可选参数,它的作用的是做模式的匹配,这点和keys的 模式匹配很像。

·count number是可选参数,它的作用是表明每次要遍历的键个数,默认 值是10,此参数可以适当增大。

现有一个Redis有26个键(英文26个字母),现在要遍历所有的键,使 用scan命令效果的操作如下。

第一次执行scan0,返回结果分为两个部分:第 一个部分6就是下次scan需要的cursor,第二个部分是10个键:

redis 简单整理——redis 的键管理[七]

这次得到的cursor="11",继续执行scan11得到结果cursor变为0,说明所 有的键已经被遍历过了:

redis 简单整理——redis 的键管理[七]

除了scan以外,Redis提供了面向哈希类型、集合类型、有序集合的扫 描遍历命令,解决诸如hgetall、smembers、zrange可能产生的阻塞问题,对应的命令分别是hscan、sscan、zscan,它们的用法和scan基本类似,

下面以 sscan为例子进行说明,当前集合有两种类型的元素,例如分别以old:user 和new:user开头,先需要将old:user开头的元素全部删除,可以参考如下 伪代码:

redis 简单整理——redis 的键管理[七]

渐进式遍历可以有效的解决keys命令可能产生的阻塞问题,但是scan并 非完美无瑕,如果在scan的过程中如果有键的变化(增加、删除、修改)

那么遍历效果可能会碰到如下问题:新增的键可能没有遍历到,遍历出了重 复的键等情况,也就是说scan并不能保证完整的遍历出来所有的键,这些是我们在开发时需要考虑的

数据库管理

Redis提供了几个面向Redis数据库的操作,它们分别是dbsize、select、 flushdb/flushall命令,本节将通过具体的使用场景介绍这些命令。

  1. 切换数据库

select dbIndex

许多关系型数据库,例如MySQL支持在一个实例下有多个数据库存在 的,但是与关系型数据库用字符来区分不同数据库名不同,Redis只是用数 字作为多个数据库的实现。Redis默认配置中是有16个数据库:

databases 16

redis 简单整理——redis 的键管理[七]

Redis3.0中已经逐渐弱化这个功能,例如Redis的分布式实现Redis Cluster只允许使用0号数据库,只不过为了向下兼容老版本的数据库功能, 该功能没有完全废弃掉,下面分析一下为什么要废弃掉这个“优秀”的功能 呢?总结起来有三点:

  1. Redis是单线程的。如果使用多个数据库,那么这些数据库仍然是使用 一个CPU,彼此之间还是会受到影响的

  2. 多数据库的使用方式,会让调试和运维不同业务的数据库变的困难, 假如有一个慢查询存在,依然会影响其他数据库,这样会使得别的业务方定 位问题非常的困难

  3. 部分Redis的客户端根本就不支持这种方式。即使支持,在开发的时候 来回切换数字形式的数据库,很容易弄乱。

2.flushdb/flushall

flushdb/flushall命令用于清除数据库,两者的区别的是flushdb只清除当 前数据库,flushall会清除所有数据库。

总结

1)Redis提供5种数据结构,每种数据结构都有多种内部编码实现。

2)纯内存存储、IO多路复用技术、单线程架构是造就Redis高性能的三 个因素。

3)由于Redis的单线程架构,所以需要每个命令能被快速执行完,否则 会存在阻塞Redis的可能,理解Redis单线程命令处理机制是开发和运维Redis 的核心之一。

4)批量操作(例如mget、mset、hmset等)能够有效提高命令执行的效 率,但要注意每次批量操作的个数和字节数

5)了解每个命令的时间复杂度在开发中至关重要,例如在使用keys、 hgetall、smembers、zrange等时间复杂度较高的命令时,需要考虑数据规模 对于Redis的影响。
6)persist命令可以删除任意类型键的过期时间,但是set命令也会删除 字符串类型键的过期时间,这在开发时容易被忽视。
7)move、dump+restore、migrate是Redis发展过程中三种迁移键的方 式,其中move命令基本废弃,migrate命令用原子性的方式实现了 dump+restore,并且支持批量操作,是Redis Cluster实现水平扩容的重要工 具。

8)scan命令可以解决keys命令可能带来的阻塞问题,同时Redis还提供了hscan、sscan、zscan渐进式地遍历hash、set、zset。

下一节介绍redis的一些实用的功能。

redis 简单整理——redis 的键管理[七]

上一篇:Oscar, VinVL Pre-training: Bugs and Solutions


下一篇:ubuntu的网络配置-桥接模式