Redis 运维
Redis 是一个高性能的 key-value 数据库。
SET 操作每秒钟 110000 次;GET 操作每秒钟 81000 次。

安装

Window 下安装

Redis 支持 32 位和 64 位。这个需要根据你系统平台的实际情况选择,这里我们下载 Redis-x64-xxx.zip压缩包到 C 盘,解压后,将文件夹重新命名为 redis
打开一个 cmd 窗口 使用 cd 命令切换目录到 C:\redis 运行 redis-server.exe redis.windows.conf
如果想方便的话,可以把 redis 的路径加到系统的环境变量里,这样就省得再输路径了,后面的那个 redis.windows.conf 可以省略,如果省略,会启用默认的。
这时候另启一个 cmd 窗口,原来的不要关闭,不然就无法访问服务端了。
切换到 redis 目录下运行 redis-cli.exe -h 127.0.0.1 -p 6379

Linux 下安装

下载、解压、编译 Redis
1
$ wget http://download.redis.io/releases/redis-5.0.4.tar.gz
2
$ tar xzf redis-5.0.4.tar.gz
3
$ cd redis-5.0.4
4
$ make
Copied!
为了编译 Redis 源码,你需要 gcc-c++和 tcl。如果你的系统是 CentOS,可以直接执行命令:yum install -y gcc-c++ tcl 来安装。
进入到解压后的 src 目录,通过如下命令启动 Redis:
1
$ src/redis-server
Copied!
您可以使用内置的客户端与 Redis 进行交互:
1
$ src/redis-cli
2
redis> set foo bar
3
OK
4
redis> get foo
5
"bar"
Copied!

Ubuntu 下安装

在 Ubuntu 系统安装 Redi 可以使用以下命令:
1
$sudo apt-get update
2
$sudo apt-get install redis-server
Copied!

开机启动

  • 开机启动配置:echo "/usr/local/bin/redis-server /etc/redis.conf" >> /etc/rc.local

开放防火墙端口

  • 添加规则:iptables -I INPUT -p tcp -m tcp --dport 6379 -j ACCEPT
  • 保存规则:service iptables save
  • 重启 iptables:service iptables restart

Redis 使用和配置

启动

启动 redis 服务
1
cd /usr/local/redis/src
2
./redis-server
Copied!
启动 redis 客户端
1
cd /usr/local/redis/src
2
./redis-cli
Copied!
查看 redis 是否启动
1
$ redis-cli
Copied!
以上命令将打开以下终端:
1
redis 127.0.0.1:6379>
Copied!
127.0.0.1 是本机 IP ,6379 是 redis 服务端口。现在我们输入 PING 命令。
1
redis 127.0.0.1:6379> ping
2
PONG
Copied!
以上说明我们已经成功启动了 redis。

常见配置

Redis 默认的配置文件是根目录下的 redis.conf 文件。
如果需要指定特定文件作为配置文件,需要使用命令: ./redis-server -c xxx.conf
每次修改配置后,需要重启才能生效。
Redis 官方默认配置:
自 Redis2.6 起就可以直接通过命令行传递 Redis 配置参数。这种方法可以用于测试。自 Redis2.6 起就可以直接通过命令行传递 Redis 配置参数。这种方法可以用于测试。

设为守护进程

Redis 默认以非守护进程方式启动,而通常我们会将 Redis 设为守护进程启动方式,配置:daemonize yes

远程访问

Redis 默认绑定 127.0.0.1,这样就只能本机才能访问,若要 Redis 允许远程访问,需要配置:bind 0.0.0.0

设置密码

Redis 默认访问不需要密码,如果需要设置密码,需要如下配置:
  • protected-mode yes
  • requirepass <密码>

配置参数表

配置项
说明
daemonize no
Redis 默认不是以守护进程的方式运行,可以通过该配置项修改,使用 yes 启用守护进程(Windows 不支持守护线程的配置为 no )
pidfile /var/run/redis.pid
当 Redis 以守护进程方式运行时,Redis 默认会把 pid 写入 /var/run/redis.pid 文件,可以通过 pidfile 指定
port 6379
指定 Redis 监听端口,默认端口为 6379,作者在自己的一篇博文中解释了为什么选用 6379 作为默认端口,因为 6379 在手机按键上 MERZ 对应的号码,而 MERZ 取自意大利歌女 Alessia Merz 的名字
bind 127.0.0.1
绑定的主机地址
timeout 300
当客户端闲置多长时间后关闭连接,如果指定为 0,表示关闭该功能
loglevel notice
指定日志记录级别,Redis 总共支持四个级别:debug、verbose、notice、warning,默认为 notice
logfile stdout
日志记录方式,默认为标准输出,如果配置 Redis 为守护进程方式运行,而这里又配置为日志记录方式为标准输出,则日志将会发送给 /dev/null
databases 16
设置数据库的数量,默认数据库为 0,可以使用 SELECT 命令在连接上指定数据库 id
save <seconds> <changes> Redis 默认配置文件中提供了三个条件:save 900 1save 300 10save 60 10000 分别表示 900 秒(15 分钟)内有 1 个更改,300 秒(5 分钟)内有 10 个更改以及 60 秒内有 10000 个更改。
指定在多长时间内,有多少次更新操作,就将数据同步到数据文件,可以多个条件配合
rdbcompression yes
指定存储至本地数据库时是否压缩数据,默认为 yes,Redis 采用 LZF 压缩,如果为了节省 CPU 时间,可以关闭该选项,但会导致数据库文件变的巨大
dbfilename dump.rdb
指定本地数据库文件名,默认值为 dump.rdb
dir ./
指定本地数据库存放目录
slaveof <masterip> <masterport>
设置当本机为 slav 服务时,设置 master 服务的 IP 地址及端口,在 Redis 启动时,它会自动从 master 进行数据同步
masterauth <master-password>
当 master 服务设置了密码保护时,slav 服务连接 master 的密码
requirepass foobared
设置 Redis 连接密码,如果配置了连接密码,客户端在连接 Redis 时需要通过 AUTH 命令提供密码,默认关闭
maxclients 128
设置同一时间最大客户端连接数,默认无限制,Redis 可以同时打开的客户端连接数为 Redis 进程可以打开的最大文件描述符数,如果设置 maxclients 0,表示不作限制。当客户端连接数到达限制时,Redis 会关闭新的连接并向客户端返回 max number of clients reached 错误信息
maxmemory <bytes>
指定 Redis 最大内存限制,Redis 在启动时会把数据加载到内存中,达到最大内存后,Redis 会先尝试清除已到期或即将到期的 Key,当此方法处理 后,仍然到达最大内存设置,将无法再进行写入操作,但仍然可以进行读取操作。Redis 新的 vm 机制,会把 Key 存放内存,Value 会存放在 swap 区
appendonly no
指定是否在每次更新操作后进行日志记录,Redis 在默认情况下是异步的把数据写入磁盘,如果不开启,可能会在断电时导致一段时间内的数据丢失。因为 redis 本身同步数据文件是按上面 save 条件来同步的,所以有的数据会在一段时间内只存在于内存中。默认为 no
appendfilename appendonly.aof
指定更新日志文件名,默认为 appendonly.aof

Redis 集群使用和配置

Redis 3.0 后支持集群模式。

集群规划

Redis 集群一般由 多个节点 组成,节点数量至少为 6 个,才能保证组成 完整高可用 的集群。
理想情况当然是所有节点各自在不同的机器上,首先于资源,本人在部署 Redis 集群时,只得到 3 台服务器。所以,我计划每台服务器部署 2 个 Redis 节点。

部署

Redis 集群节点的安装与单节点服务相同,差异仅在于部署方式。
假设三台服务器地址如下:
  • 服务 A:127.0.0.1
  • 服务 B:127.0.0.2
  • 服务 C:127.0.0.3
分配如下:
127.0.0.1
127.0.0.2
127.0.0.3
127.0.0.1:6381
127.0.0.2:6383
127.0.0.3:6385
127.0.0.1:6382
127.0.0.2:6384
127.0.0.3:6386

(1)创建节点目录

我个人偏好将软件放在 /opt 目录下,在我的机器中,Redis 都安装在 /usr/local/redis 目录下。所以,下面的命令和配置都假设 Redis 安装目录为 /usr/local/redis
确保机器上已经安装了 Redis 后,执行以下命令,创建 Redis 集群节点实例目录:
  • 127.0.0.1
1
sudo mkdir -p /usr/local/redis/cluster/6381
2
sudo mkdir -p /usr/local/redis/cluster/6382
Copied!
  • 127.0.0.2
1
sudo mkdir -p /usr/local/redis/cluster/6383
2
sudo mkdir -p /usr/local/redis/cluster/6384
Copied!
  • 127.0.0.3
1
sudo mkdir -p /usr/local/redis/cluster/6385
2
sudo mkdir -p /usr/local/redis/cluster/6386
Copied!

(2)集群节点实例配置

每个实例目录下,新建 redis.conf 配置文件。
实例配置模板以 6381 节点为例(其他节点,完全替换配置中的端口号 6381 即可),如下:
1
# 端口号
2
port 6381
3
# 绑定的主机端口(0.0.0.0 表示允许远程访问)
4
bind 0.0.0.0
5
# 以守护进程方式启动
6
daemonize yes
7
8
# 开启集群模式
9
cluster-enabled yes
10
# 集群的配置,配置文件首次启动自动生成
11
cluster-config-file /usr/local/redis/cluster/6381/6381.conf
12
# 请求超时时间,设置 10 秒
13
cluster-node-timeout 10000
14
15
# 开启 AOF 持久化
16
appendonly yes
17
# 数据存放目录
18
dir /usr/local/redis/cluster/6381
19
# 进程文件
20
pidfile /var/run/redis/redis-6381.pid
21
# 日志文件
22
logfile /usr/local/redis/cluster/6381/6381.log
Copied!

(3)启动 Redis 节点

Redis 的 utils/create-cluster 目录下自带了一个名为 create-cluster 的脚本工具,可以利用它来新建、启动、停止、重启 Redis 节点。
脚本中有几个关键参数:
  • PORT=30000 - 初始端口号
  • TIMEOUT=2000 - 超时时间
  • NODES=6 - 节点数
  • REPLICAS=1 - 备份数
脚本中的每个命令项会根据初始端口号,以及设置的节点数,遍历的去执行操作。
由于前面的规划中,节点端口是从 6381 ~ 6386,所以需要将 PORT 变量设为 6380。
脚本中启动每个 Redis 节点是通过指定命令行参数来配置属性。所以,我们需要改一下:
1
if [ "$1" == "start" ]
2
then
3
while [ $((PORT < ENDPORT)) != "0" ]; do
4
PORT=$((PORT+1))
5
echo "Starting $PORT"
6
/usr/local/redis/src/redis-server /usr/local/redis/cluster/${PORT}/redis.conf
7
done
8
exit 0
9
fi
Copied!
好了,在每台服务器上,都执行 ./create-cluster start 来启动节点。
然后,通过 ps 命令来确认 Redis 进程是否已经工作:
1
$ ps -ef | grep redis
2
root 12036 1 12 16:26 ? 00:08:28 /usr/local/redis/src/redis-server 0.0.0.0:6381 [cluster]
3
root 12038 1 0 16:26 ? 00:00:03 /usr/local/redis/src/redis-server 0.0.0.0:6382 [cluster]
Copied!

(4)启动集群

通过 redis-cli --cluster create 命令可以自动配置集群,如下:
1
$ /usr/local/redis/src/redis-cli --cluster create 127.0.0.1:6381 127.0.0.1:6382 127.0.0.2:6383 127.0.0.2:6384 127.0.0.3:6385 127.0.0.3:6386 --cluster-replicas 1
Copied!
如果启动成功,可以看到如下信息:
1
>>> Performing hash slots allocation on 6 nodes...
2
Master[0] -> Slots 0 - 5460
3
Master[1] -> Slots 5461 - 10922
4
Master[2] -> Slots 10923 - 16383
5
Adding replica 127.0.0.2:6384 to 127.0.0.1:6381
6
Adding replica 127.0.0.3:6386 to 127.0.0.2:6383
7
Adding replica 127.0.0.1:6382 to 127.0.0.3:6385
8
M: 75527b790e46530ea271a5b78f9e0fd9030f68e0 127.0.0.1:6381
9
slots:[0-5460] (5461 slots) master
10
S: 031dd0fd5ad90fa26fcf45d49ad906d063611a6d 127.0.0.1:6382
11
replicates 53012ebdd25005840da9ecbe07d937296a264206
12
M: 0cfbceec272b6ff70e1dfb5c5346a5cb2c20c884 127.0.0.2:6383
13
slots:[5461-10922] (5462 slots) master
14
S: 016ae9624202891cc6f2b480ff0634de478197fb 127.0.0.2:6384
15
replicates 75527b790e46530ea271a5b78f9e0fd9030f68e0
16
M: 53012ebdd25005840da9ecbe07d937296a264206 127.0.0.3:6385
17
slots:[10923-16383] (5461 slots) master
18
S: b6d70f2ed78922b1dcb7967ebe1d05ad9157fca8 127.0.0.3:6386
19
replicates 0cfbceec272b6ff70e1dfb5c5346a5cb2c20c884
20
Can I set the above configuration? (type 'yes' to accept): yes
21
>>> Nodes configuration updated
22
>>> Assign a different config epoch to each node
23
>>> Sending CLUSTER MEET messages to join the cluster
24
Waiting for the cluster to join
25
....
26
>>> Performing Cluster Check (using node 127.0.0.1:6381)
27
M: 75527b790e46530ea271a5b78f9e0fd9030f68e0 127.0.0.1:6381
28
slots:[0-5460] (5461 slots) master
29
1 additional replica(s)
30
M: 0cfbceec272b6ff70e1dfb5c5346a5cb2c20c884 127.0.0.2:6383
31
slots:[5461-10922] (5462 slots) master
32
1 additional replica(s)
33
S: 016ae9624202891cc6f2b480ff0634de478197fb 127.0.0.2:6384
34
slots: (0 slots) slave
35
replicates 75527b790e46530ea271a5b78f9e0fd9030f68e0
36
M: 53012ebdd25005840da9ecbe07d937296a264206 127.0.0.3:6385
37
slots:[10923-16383] (5461 slots) master
38
1 additional replica(s)
39
S: 031dd0fd5ad90fa26fcf45d49ad906d063611a6d 127.0.0.1:6382
40
slots: (0 slots) slave
41
replicates 53012ebdd25005840da9ecbe07d937296a264206
42
S: b6d70f2ed78922b1dcb7967ebe1d05ad9157fca8 127.0.0.3:6386
43
slots: (0 slots) slave
44
replicates 0cfbceec272b6ff70e1dfb5c5346a5cb2c20c884
45
[OK] All nodes agree about slots configuration.
46
>>> Check for open slots...
47
>>> Check slots coverage...
48
[OK] All 16384 slots covered.
Copied!
  • 关闭集群 - ./create-cluster stop
  • 检查集群是否健康(指定任意节点即可):./redis-cli --cluster check <ip:port>
  • 尝试修复集群节点:./redis-cli --cluster fix <ip:port>

Redis 命令

命令详细用法,请参考 Redis 命令官方文档
搬迁两张 cheat sheet 图,原址:https://www.cheatography.com/tasjaevan/cheat-sheets/redis/

压力测试

参考官方文档:How fast is Redis?
Redis 自带了一个性能测试工具:redis-benchmark
(1)基本测试
1
$ redis-benchmark -q -n 100000
Copied!
  • -q 表示静默(quiet)执行
  • -n 100000 请求 10 万次
(2)测试指定读写指令
1
$ redis-benchmark -t set,lpush -n 100000 -q
2
SET: 74239.05 requests per second
3
LPUSH: 79239.30 requests per second
Copied!
(3)测试 pipeline 模式下指定读写指令
1
redis-benchmark -n 1000000 -t set,get -P 16 -q
2
SET: 403063.28 requests per second
3
GET: 508388.41 requests per second
Copied!

客户端

推荐使用 RedisDesktopManager

脚本

CentOS7 环境安装脚本:软件运维配置脚本集合
安装说明
  • 采用编译方式安装 Redis, 并将其注册为 systemd 服务
  • 安装路径为:/usr/local/redis
  • 默认下载安装 5.0.4 版本,端口号为:6379,密码为空
使用方法
  • 默认安装 - 执行以下任意命令即可:
1
curl -o- https://gitee.com/turnon/linux-tutorial/raw/master/codes/linux/soft/redis-install.sh | bash
2
wget -qO- https://gitee.com/turnon/linux-tutorial/raw/master/codes/linux/soft/redis-install.sh | bash
Copied!
  • 自定义安装 - 下载脚本到本地,并按照以下格式执行:
1
sh redis-install.sh [version] [port] [password]
Copied!
参数说明:
  • version - redis 版本号
  • port - redis 服务端口号
  • password - 访问密码

参考资料