想飞的鱼 Java Dev Engineer

redis 以及nginx

2018-01-10

redis缓存,nginx反向代理,动静分离

startnginx

redis命令

启动:	redis-server redis.conf
关闭:redis-cli  shutdown 有密码先登录auth登录直接敲  shutdown
登录(如有密码): auth 密码 

连接:
	本地: redis-cli
	远程: redis-cli -h 192.168.86.20 -p 6379

切换数据库(默认16个数据库):select 0

查看里面的键值: keys * 
*代表所有,也可以输入表达式

删除已有的键: del 键名

设置

requirepass 设置密码
db

通用操作

参考

# 下面命令可直接运行
flushdb: 
flushall:

BGSAVE: 在后台异步保存当前数据库的数据到磁盘
CLIENT LIST: 获取连接到服务器的客户端连接列表

COMMAND: 获取 Redis 命令详情数组
COMMAND COUNT:获取 Redis 命令总数
COMMAND GETKEYS:获取给定命令的所有键
CONFIG GET parameter :获取指定配置参数的值 eg: config get *max-*-entries*
CONFIG SET parameter value: 修改 redis 配置参数,无需重启 eg: CONFIG SET slowlog-max-len 10086
DBSIZE :返回当前数据库的 key 的数量
ROLE   :返回主从实例所属的角色
SAVE	:同步保存数据到硬盘
BGSAVE	:在后台异步保存当前数据库的数据到磁盘
SHUTDOWN [NOSAVE] [SAVE]	:异步保存数据到硬盘,并关闭服务器
DEBUG SEGFAULT	:让 Redis 服务崩溃
SLAVEOF host port: 将当前服务器转变为指定服务器的从属服务器(slave server)	eg: SLAVEOF 127.0.0.1 6379(打开) ,   SLAVEOF NO ONE(关闭)


# 查看内存使用情况
#1. 使用的内存大小:Redis总共使用的内存量是多少; 2. 使用最大内存:Redis使用的最大内存量是多少;3. 内存分配器:Redis使用的内存分配器类型;4. 碎片大小:Redis内存中存在的碎片大小;5. 内存关键字:Redis内存的关键字统计。

info memory  

info 命令中

used_memory表示redis实例当前占用的内存数;used_memory_human表示对于人类可读的内存数,这里是1.48M;used_memory_rss表示Redis占用操作系统的内存数(包括操作系统回收的内存以及swap等);used_memory_peak表示Redis占用过的内存峰值。

数据类型

Redis支持五种数据类型:string(字符串),hash(哈希),list(列表),set(集合)及zset(sorted set:有序集合)。GEO 地理位置(3.2+), Stream结构(5.0+)

String (字符串)
192.168.86.20:6379> set tom tomcat
OK
192.168.86.20:6379> get tom
"tomcat"
hash(哈希)

Redis hash 是一个键值(key=>value)对集合。

Redis hash 是一个 string 类型的 field 和 value 的映射表,hash 特别适合用于存储对象。


192.168.86.20:6379> hmset bob field1 "bb1" field2 "bb2"
OK
192.168.86.20:6379> hmget bob field1
1) "bb1"

list(列表)

Redis 列表是简单的字符串列表,按照插入顺序排序。你可以添加一个元素到列表的头部(左边)或者尾部(右边)

192.168.86.20:6379> lpush june barry1
(integer) 1
192.168.86.20:6379> lpush june barry2
(integer) 2
192.168.86.20:6379> lrange june 0 2
1) "barry2"
2) "barry1

set(集合)

Redis 的 Set 是 string 类型的无序集合。

集合是通过哈希表实现的,所以添加,删除,查找的复杂度都是 O(1)。


192.168.86.20:6379> sadd jike jike1
(integer) 1
192.168.86.20:6379> sadd jike jike2
(integer) 1
192.168.86.20:6379> sadd jike jike2
(integer) 0
192.168.86.20:6379>
192.168.86.20:6379> smembers jike
1) "jike1"
2) "jike2"
192.168.86.20:6379>



zset(sorted set:有序集合)

Redis zset 和 set 一样也是string类型元素的集合,且不允许重复的成员。

不同的是每个元素都会关联一个double类型的分数。redis正是通过分数来为集合中的成员进行从小到大的排序。

zset的成员是唯一的,但分数(score)却可以重复。


192.168.86.20:6379> zadd rose 0 rose1
(integer) 1
192.168.86.20:6379> zadd rose 1 rose1
(integer) 0
192.168.86.20:6379> zadd rose 2 rose2
(integer) 1
192.168.86.20:6379> zadd rose 3 rose3
(integer) 1
192.168.86.20:6379> zrangebyscore 0 2
(error) ERR wrong number of arguments for 'zrangebyscore' command
192.168.86.20:6379> zrangebyscore rose 0 2
1) "rose1"
2) "rose2"
192.168.86.20:6379>

订阅发布

Redis 发布订阅 (pub/sub) 是一种消息通信模式:发送者 (pub) 发送消息,订阅者 (sub) 接收消息。

Redis 客户端可以订阅任意数量的频道。

订阅之后控制台挂起,等有发布消息在打印出来

# 订阅

192.168.86.20:6379> subscribe myChat
Reading messages... (press Ctrl-C to quit)
1) "subscribe"
2) "myChat"
3) (integer) 1
1) "message"
2) "myChat"
3) "hello I'm bob"


# 发布
192.168.86.20:6379> publish myChat "hello I'm bob"
(integer) 1
192.168.86.20:6379> publish myChat "hello I'm bob"

事务

Redis 事务可以一次执行多个命令, 并且带有以下三个重要的保证:

  • 批量操作在发送 EXEC 命令前被放入队列缓存。
  • 收到 EXEC 命令后进入事务执行,事务中任意命令执行失败,其余的命令依然被执行。
  • 在事务执行过程,其他客户端提交的命令请求不会插入到事务执行命令序列中。

一个事务从开始到执行会经历以下三个阶段:

  • 开始事务。
  • 命令入队。
  • 执行事务。
  • 开始事务命令: MULTI
  • 执行提交: EXEC
  • 取消事务,回滚: DISCARD
# 事务提交
192.168.86.20:6379> multi
OK
192.168.86.20:6379> set aaa aaa1
QUEUED
192.168.86.20:6379> set aaa1 aaa1
QUEUED
192.168.86.20:6379> set aaa1 aaa1
QUEUED
192.168.86.20:6379> exec
1) OK
2) OK
3) OK

# 事务回滚
192.168.86.20:6379> multi
OK
192.168.86.20:6379> set aaa2 aaa2
QUEUED
192.168.86.20:6379> discard
OK

redis-cli 命令有很多。比如

连接操作相关的命令

  • 默认直接连接 远程连接-h 192.168.1.20 -p 6379
  • ping:测试连接是否存活如果正常会返回pong
  • echo:打印
  • select:切换到指定的数据库,数据库索引号 index 用数字值指定,以 0 作为起始索引值
  • quit:关闭连接(connection)
  • auth:简单密码认证

服务端相关命令

  • time:返回当前服务器时间
  • client list: 返回所有连接到服务器的客户端信息和统计数据 参见http://redisdoc.com/server/client_list.html
  • client kill ip:port:关闭地址为 ip:port 的客户端
  • save:将数据同步保存到磁盘
  • bgsave:将数据异步保存到磁盘
  • lastsave:返回上次成功将数据保存到磁盘的Unix时戳
  • shundown:将数据同步保存到磁盘,然后关闭服务
  • info:提供服务器的信息和统计
  • config resetstat:重置info命令中的某些统计数据
  • config get:获取配置文件信息
  • config set:动态地调整 Redis 服务器的配置(configuration)而无须重启,可以修改的配置参数可以使用命令 CONFIG GET * 来列出
  • config rewrite:Redis 服务器时所指定的 redis.conf 文件进行改写
  • monitor:实时转储收到的请求
  • slaveof:改变复制策略设置

发布订阅相关命令

  • psubscribe:订阅一个或多个符合给定模式的频道 例如psubscribe news.* tweet.*
  • publish:将信息 message 发送到指定的频道 channel 例如publish msg "good morning"
  • pubsub channels:列出当前的活跃频道 例如PUBSUB CHANNELS news.i*
  • pubsub numsub:返回给定频道的订阅者数量 例如PUBSUB NUMSUB news.it news.internet news.sport news.music
  • pubsub numpat:返回客户端订阅的所有模式的数量总和
  • punsubscribe:指示客户端退订所有给定模式。
  • subscribe:订阅给定的一个或多个频道的信息。例如 subscribe msg chat_room
  • unsubscribe:指示客户端退订给定的频道。

对KEY操作的命令

  • exists(key):确认一个key是否存在
  • del(key):删除一个key
  • type(key):返回值的类型
  • keys(pattern):返回满足给定pattern的所有key
  • randomkey:随机返回key空间的一个
  • keyrename(oldname, newname):重命名key
  • dbsize:返回当前数据库中key的数目
  • expire:设定一个key的活动时间(s)
  • ttl:获得一个key的活动时间
  • move(key, dbindex):移动当前数据库中的key到dbindex数据库
  • flushdb:删除当前选择数据库中的所有key
  • flushall:删除所有数据库中的所有key

对String操作的命令

  • set(key, value):给数据库中名称为key的string赋予值value
  • get(key):返回数据库中名称为key的string的value
  • getset(key, value):给名称为key的string赋予上一次的value
  • mget(key1, key2,…, key N):返回库中多个string的value
  • setnx(key, value):添加string,名称为key,值为value
  • setex(key, time, value):向库中添加string,设定过期时间time
  • mset(key N, value N):批量设置多个string的值
  • msetnx(key N, value N):如果所有名称为key i的string都不存在
  • incr(key):名称为key的string增1操作
  • incrby(key, integer):名称为key的string增加integer
  • decr(key):名称为key的string减1操作
  • decrby(key, integer):名称为key的string减少integer
  • append(key, value):名称为key的string的值附加value
  • substr(key, start, end):返回名称为key的string的value的子串

对List操作的命令

  • rpush(key, value):在名称为key的list尾添加一个值为value的元素
  • lpush(key, value):在名称为key的list头添加一个值为value的 元素
  • llen(key):返回名称为key的list的长度
  • lrange(key, start, end):返回名称为key的list中start至end之间的元素
  • ltrim(key, start, end):截取名称为key的list
  • lindex(key, index):返回名称为key的list中index位置的元素
  • lset(key, index, value):给名称为key的list中index位置的元素赋值
  • lrem(key, count, value):删除count个key的list中值为value的元素
  • lpop(key):返回并删除名称为key的list中的首元素
  • rpop(key):返回并删除名称为key的list中的尾元素
  • blpop(key1, key2,… key N, timeout):lpop命令的block版本。
  • brpop(key1, key2,… key N, timeout):rpop的block版本。
  • rpoplpush(srckey, dstkey):返回并删除名称为srckey的list的尾元素,并将该元素添加到名称为dstkey的list的头部

对Set操作的命令

  • sadd(key, member):向名称为key的set中添加元素member
  • srem(key, member) :删除名称为key的set中的元素member
  • spop(key) :随机返回并删除名称为key的set中一个元素
  • smove(srckey, dstkey, member) :移到集合元素
  • scard(key) :返回名称为key的set的基数
  • sismember(key, member) :member是否是名称为key的set的元素
  • sinter(key1, key2,…key N) :求交集
  • sinterstore(dstkey, (keys)) :求交集并将交集保存到dstkey的集合
  • sunion(key1, (keys)) :求并集
  • sunionstore(dstkey, (keys)) :求并集并将并集保存到dstkey的集合
  • sdiff(key1, (keys)) :求差集
  • sdiffstore(dstkey, (keys)) :求差集并将差集保存到dstkey的集合
  • smembers(key) :返回名称为key的set的所有元素
  • srandmember(key) :随机返回名称为key的set的一个元素

对Hash操作的命令

    • hset(key, field, value):向名称为key的hash中添加元素field
    • hget(key, field):返回名称为key的hash中field对应的value
    • hmget(key, (fields)):返回名称为key的hash中field i对应的value
    • hmset(key, (fields)):向名称为key的hash中添加元素field
    • hincrby(key, field, integer):将名称为key的hash中field的value增加integer
    • hexists(key, field):名称为key的hash中是否存在键为field的域
    • hdel(key, field):删除名称为key的hash中键为field的域
    • hlen(key):返回名称为key的hash中元素个数
    • hkeys(key):返回名称为key的hash中所有键
    • hvals(key):返回名称为key的hash中所有键对应的value
    • hgetall(key):返回名称为key的hash中所有的键(field)及其对应的value

模拟oom

redis-cli debug oom

模拟宕机

redis-cli debug segfault

模拟hang

redis-cli -p 6379 DEBUG sleep 30

获取慢查询

SLOWLOG GET 10 结果为查询ID、发生时间、运行时长和原命令 默认10毫秒,默认只保留最后的128条。单线程的模型下,一个请求占掉10毫秒是件大事情,注意设置和显示的单位为微秒,注意这个时间是不包含网络延迟的。 slowlog get 获取慢查询日志 slowlog len 获取慢查询日志条数 slowlog reset 清空慢查询

配置:

config set slow-log-slower-than 20000

config set slow-max-len 1000

config rewrite

redis配置文件详解

redis.window.conf 各项参数含义




#redis的配置
 
#Redis默认不是以守护进程的方式运行,可以通过该配置项修改,使用yes启用守护进程
daemonize yes
#当Redis以守护进程方式运行时,Redis默认会把pid写入redis.pid文件,可以通过pidfile指定
pidfile 'E:/xxx/redis/redis_pid/redis.pid'
#端口
port 6379
#绑定主机的ip地址
bind 127.0.0.1
#当 客户端闲置多长时间后关闭连接,如果指定为0,表示关闭该功能
timeout 300
#指定日志记录级别,Redis总共支持四个级别:debug、verbose、notice、warning,默认为verbose
loglevel notice
#日志记录方式,默认为标准输出,如果配置Redis为守护进程方式运行,而这里又配置为日志记录方式为标准输出,则日志将会发送给/dev/null
logfile stdout
#设置数据库的数量,默认数据库为0,可以使用SELECT <dbid>命令在连接上指定数据库id
databases 16
#指定在多长时间内,有多少次更新操作,就将数据同步到数据文件,可以多个条件配合
#分别表示900秒(15分钟)内有1个更改,300秒(5分钟)内有10个更改以及60秒内有10000个更改
save 900 1
save 300 10
save 60 10000
#指定存储至本地数据库时是否压缩数据,默认为yes,Redis采用LZF压缩,如果为了节省CPU时间,可以关闭该选项,但会导致数据库文件变的巨大
rdbcompression yes
#指定本地数据库文件名,默认值为dump.rdb
dbfilename dump.rdb
#指定本地数据库存放目录
dir 'D:/XXX/redis/redis_database'
#设置当本机为slav服务时,设置master服务的IP地址及端口,在Redis启动时,它会自动从master进行数据同步
#slaveof 127.0.0.1 6379
#当master服务设置了密码保护时,slav服务连接master的密码
#masterauth 123456
#设置Redis连接密码,如果配置了连接密码,客户端在连接Redis时需要通过AUTH <password>命令提供密码,默认关闭
#requirepass foobared
#设置同一时间最大客户端连接数,默认无限制,Redis可以同时打开的客户端连接数为Redis进程可以打开的最大文件描述符数,如果设置 maxclients 0,表示不作限制。当客户端连接数到达限制时,Redis会关闭新的连接并向客户端返回max number of clients reached错误信息
maxclients 10000
#指定Redis最大内存限制,Redis在启动时会把数据加载到内存中,达到最大内存后,Redis会先尝试清除已到期或即将到期的Key,当此方法处理 后,仍然到达最大内存设置,将无法再进行写入操作,但仍然可以进行读取操作。Redis新的vm机制,会把Key存放内存,Value会存放在swap区
maxmemory 300m
#指定是否在每次更新操作后进行日志记录,Redis在默认情况下是异步的把数据写入磁盘,如果不开启,可能会在断电时导致一段时间内的数据丢失。因为 redis本身同步数据文件是按上面save条件来同步的,所以有的数据会在一段时间内只存在于内存中。默认为no
appendonly yes
#指定更新日志文件名,默认为appendonly.aof
appendfilename 'appendonly.aof'
#指定更新日志条件,共有3个可选值
#no:表示等操作系统进行数据缓存同步到磁盘(快) 
#always:表示每次更新操作后手动调用fsync()将数据写到磁盘(慢,安全)
#everysec:表示每秒同步一次(折衷,默认值)
appendfsync everysec


如果没有设置最大使用内存是默认没有限制,这样如果我们在程序设计中没有考虑到数据最大临界值,会导致操作系统崩溃,后果无法想象。

  • 找到如下配置,设置redis最大占用内存(配置文件中):
maxmemory 2147483648

设置redis数据淘汰策略 如果设置了maxmemory,一般都要设置过期策略。Redis默认有六种过期策略: volatile-lru -> 根据LRU算法生成的过期时间来删除。 -allkeys-lru -> 根据LRU算法删除任何key。 volatile-random -> 根据过期设置来随机删除key。 allkeys->random -> 无差别随机删。 volatile-ttl -> 根据最近过期时间来删除(辅以TTL)。 noeviction -> 谁也不删,直接在写操作时返回错误。 这里使用第一种(配置文件中):

maxmemory-policy volatile-lru

下一篇 nginx

Comments

Content