Redis安装部署

系统配置

vm.overcommit_memory

Linux系统对内存请求都会分配，以便能运行更多程序。在申请内存后并不会马上使用内存，这种技术就叫做overcommit，如果参数设置为0则Redis会出现告警。

1

WARNING overcommit_memory is set 0!

该参数有三个值可选，Redis建议设置为1并配合maxmemory使用

值	描述
0	内核将检查是否有可用内存(包括swap)，如果有足够的内存，则申请通过，否则将失败信息返回给应用程序
1	内核允许超量使用内存直到用完为止
2	内核保证不会超量使用内存，即不超过swap+50%的RAM值，50%是参数overcommit_ratio控制

修改内核参数

1
2


$ echo "vm.overcommit_memory=1" >> /etc/sysctl.conf
$ sysctl vm.overcommit_memory=1

swappiness

swap内存交换空间能够在内存不足时，对部分内存页进行swap操作。但swap空间是由硬盘提供，对于高并发应用程序来说，磁盘IO能力会成为系统瓶颈。Linux并不是完全等到内存不够用时才使用swap，参数swappiness会决定系统使用swap的策略。swappiness取值范围为0~100，值越大说明系统会更积极使用swap，值越低系统就更倾向于物理内存，默认值为60

值	描述
0	Linux3.5以及以上：宁愿OOM killer也不用swap；Linux3.4以及更早：宁愿swap也不要OOM killer
1	Linux3.5以及以上：宁愿swap也不要OOM killer
60	默认值
100	操作系统会主动地使用swap

查看swap使用情况

1
2
3
4
5
6


$ redis-cli -h ip -p port info server | grep process_id
process_id:986

$ cat /proc/886/smaps | grep swap
Swap:             58056 kB
....

设置swappiness

1
2


$ echo 1 >/proc/sys/vm/swappiness
$ echo vm.swappiness=1 >> /etc/sysctl.conf

如果Linux > 3.5 ，则设置为1，否则设置为0。但是Redis为高可用环境时，死掉会比阻塞更好，能够及时切换到正常节点上

THP

Linux kernel在2.6.38内核增加了Transparent Huge Pages (THP)特性，支持大内存页(2MB)分配，默认开启。当开启时可以降低fork子进程的速度，但fork之后，每个内存页从原来4KB变为2MB，会大幅增加重写期间父进程内存消耗。同时每次写命令引起的复制内存页单位放大了512倍，会拖慢写操作的执行时间，导致大量写操作慢查询。因此，建议关闭该功能。

1
2
3
4


$ echo never >  /sys/kernel/mm/transparent_hugepage/enabled
$ echo never > /sys/kernel/mm/transparent_hugepage/defrag
$ echo "echo never >  /sys/kernel/mm/transparent_hugepage/enabled" >> /etc/rc.local
$ echo "echo never > /sys/kernel/mm/transparent_hugepage/defrag" >> /etc/rc.local

NTP

无论是什么数据库环境，都强烈建议配置时间同步，避免集群节点出现时间不一致的情况，增加问题排查日志难度，定时任务异常等情况。日常可以使用NTP服务来作为时间同步，通过crontab定时同步系统时间

ulimit

open files限制单个用户最大文件打开个数。Redis的maxclients默认为10000，加上最大32个文件描述符，因此建议open files设置为至少10032，如果采用默认的4096，减去32个文件描述符，则maxclients仅为4064

1

$ ulimit -Sn 10032

TCP backlog

Redis默认的tcp-backlog为511，可以通过修改配置tcp-backlog进行调整，如果Linux的tcp-backlog小于Redis设置的tcp-backlog，那么在Redis启动时会看到如下日志：

1

# WARNING: The TCP backlog setting of 511 cannot be enforced because /proc/sys/net/core/somaxconn is set to the lower value of 128.

修改tcp backlog

1

$ echo 1024 > /proc/sys/net/core/somaxconn

Redis安装

解压安装包

1

$ tar -xvf redis-4.0.9.tar.gz

编译安装

1
2
3


$ cd redis-4.0.9
$ make && cd src
$ make install PREFIX=/usr/local/redis -j 4

创建数据目录

1
2


$ mdkir /service/redis/data
$ mkdir /service/redis/logs

参数配置(/etc/redis.conf)

 1
 2
 3
 4
 5
 6
 7
 8
 9
10
11
12
13
14
15
16
17
18
19
20
21
22
23
24
25
26
27
28
29
30
31
32
33
34
35
36
37
38
39
40
41
42
43
44
45
46


daemonize yes
port 66803
timeout 0
tcp-keepalive 60
loglevel notice
databases 6
protected-mode no
stop-writes-on-bgsave-error yes
rdbcompression yes
rdbchecksum yes
dbfilename "dump.rdb"
dir "/service/redis"
pidfile "/service/redis/pid.file"
logfile "/service/redis/redis.log"
requirepass "Abcd123#"
maxmemory 24576000000
bind 10.240.204.157
repl-timeout 3600
slave-serve-stale-data yes
slave-read-only yes
repl-disable-tcp-nodelay no
appendonly no
appendfsync everysec
no-appendfsync-on-rewrite yes
auto-aof-rewrite-percentage 100
auto-aof-rewrite-min-size 64mb
lua-time-limit 5000
slowlog-log-slower-than 10000
slowlog-max-len 128
hash-max-ziplist-entries 512
hash-max-ziplist-value 64
list-max-ziplist-entries 512
list-max-ziplist-value 64
set-max-intset-entries 512
zset-max-ziplist-entries 128
zset-max-ziplist-value 64
activerehashing yes
client-output-buffer-limit normal 0 0 0
client-output-buffer-limit slave 0 0 0
client-output-buffer-limit pubsub 32mb 8mb 60
hz 10
aof-rewrite-incremental-fsync yes
slave-priority 50
rename-command KEYS alias-keys
rename-command FLUSHALL alias-flushall
rename-command FLUSHDB alias-flushdb

设置环境变量

1
2


$ echo "export PATH=$PATH:/usr/local/redis/bin" >> /etc/profile
$ source /etc/profile

启动数据库实例

1

$ redis-server /etc/redis.conf

附录

参数详解

参数	说明
daemonize	是否以后台进程启动
databases	创建database的数量
port	进程对应的端口，默认为6379
tcp-keepalive	指定TCP连接是否为长连接，0则关闭，非0则开启
loglevel	Server日志级别：debug调试模式、verbose、notice、warning
protected-mode	外网保护模式，禁止外网访问redis，如果要设置为no，需确保数据库不会暴漏在外网，设置为YES的话需要设置bind绑定内网IP或设置实例密码
pidfile	指定pid文件的存放位置
logfile	指定日志文件的存放位置
requirepass	设置redis登录密码
maxmemory	设置redis最大内存大小，单位为byte
bind	设置绑定的网口IP，用于接收服务请求
hz	Server执行后台任务的频率
save	rdb持久化策略，例如save 300 1表示5分钟内至少一个key变更则触发持久化操作，禁用rdb持久化可设置save ""
rdbcompression	是否启用rdb文件压缩，默认为yes
rdbchecksum	是否对rdb文件使用CRC64校验和
stop-writes-on-bgsave-error	当bgsave持久化写入错误时是否停止
dbfilename	设置rdb文件名称，默认为dump.rdb
dir	指定持久化文件的存放位置
appendonly	是否开启AOF持久化
appendfilename	指定AOF持久化文件名称，默认为appendonly.aof
appendfsync	AOF持久化策略，可选值有always、everysec、no
no-appendfsync-on-rewrite	表示rewrite重写AOF时，是否阻塞AOF持久化，no表示会阻塞
auto-aof-rewrite-percentage	触发AOF文件rewrite的增长百分比
auto-aof-rewrite-min-size	触发AOF文件rewrite的大小
aof-rewrite-incremental-fsync	AOF rewrite是否采取增量文件同步策略
slaveof	当前为从库时，设置同步主库信息
masterauth	当前为从库时，设置主库的登录密码
repl-timeout	复制超时时间，单位为秒，默认为60
slave-server-stale-data	当前为从库时，在与主库连接断开时，是否继续提供服务
slave-read-only	当前为从库时，只读
redis-disable-tcp-nodelay	主从是否延迟传输
slave-priority	指定slave的优先级，在哨兵模式下，主库宕机，会将优先级最小的提升为master。如果设置为0则永远不会提升为master
slowlog-log-slower-than	慢查询日志记录阀值，单位为微秒，超过阀值将被记录到慢查询日志
slowlog-max-len	控制slow log保留多少条记录，超过后将删除最旧的一条记录
hash-max-ziplist-entries	hash类型默认采用ziplist结构编码，超过该值则采用hashtable
hash-max-ziplist-value	ziplist允许条目value值的最大字节数
list-max-ziplist-entries	list类型默认采用ziplist结构编码，超过该值则采用linkedlist
list-max-ziplist-value	ziplist允许条目value值的最大字节数
set-max-intset-entries	intset中允许保存的最大条目数，如果达到阀值，才重构为hashtable
zset-max-ziplist-entries	zset类型默认采用ziplist编码结构，超过阀值将重构为skiplist
zset-max-ziplist-value	zset允许条目value值的最大字节数
activerehashing	是否开启顶层数据结构得rehash功能
client-output-buffer-limit normal	客户端buffer控制，normal表示普通连接，hard表示最大值，一旦到达立即关闭连接，soft表示容忍值，和seconds配合表示在超过seconds则关闭连接，都设置为0则表示禁用
client-output-buffer-limit slave	客户端buffer控制，slave表示从库连接，hard表示最大值，一旦到达立即关闭连接，soft表示容忍值，和seconds配合表示在超过seconds则关闭连接，都设置为0则表示禁用
client-output-buffer-limit pubsub	客户端buffer控制，pubsub表示pub/sub类型连接，hard表示最大值，一旦到达立即关闭连接，soft表示容忍值，和seconds配合表示在超过seconds则关闭连接，都设置为0则表示禁用
rename-command	重命名指定命令