redis 資料

redis是什么:

Redis is an open source, BSD licensed, advanced key-value store. It is often referred to as a data structure server since keys can contain strings, hashes, lists, sets and sorted sets.

redis是開源,BSD許可,高級的key-value存儲系統.

可以用來存儲字符串,哈希結構,鏈表,集合,因此,常用來提供數據結構服務.

?

redis和memcached相比,的獨特之處:

1: redis可以用來做存儲(storge), 而memccached是用來做緩存(cache)

? 這個特點主要因為其有”持久化”的功能.

2: 存儲的數據有”結構”,對于memcached來說,存儲的數據,只有1種類型--”字符串”,

? 而redis則可以存儲字符串,鏈表,哈希結構,集合,有序集合.

?

Redis下載安裝

?

1:官方站點: redis.io 下載最新版或者最新stable版

2:解壓源碼并進入目錄

3: 不用configure

4: 直接make

(如果是32位機器 make 32bit)

?

注:易碰到的問題,時間錯誤.

原因: 源碼是官方configure過的,但官方configure時,生成的文件有時間戳信息,

Make只能發生在configure之后,

如果你的虛擬機的時間不對,比如說是2012年

解決: date -s ‘yyyy-mm-dd hh:mm:ss’?? 重寫時間

??? 再 clock -w? 寫入cmos

?

?

5: 可選步驟: make test? 測試編譯情況

(可能出現: need tcl? >8.4這種情況, yum install tcl)

?

6: 安裝到指定的目錄,比如 /usr/local/redis

make? PREFIX=/usr/local/redis install

注: PREFIX要大寫

?

7: make install之后,得到如下幾個文件

redis-benchmark? 性能測試工具

redis-check-aof? 日志文件檢測工(比如斷電造成日志損壞,可以檢測并修復)

redis-check-dump? 快照文件檢測工具,效果類上

redis-cli ?客戶端

redis-server 服務端

?

?

?

8: 復制配置文件

Cp /path/redis.conf /usr/local/redis

?

?

9: 啟動與連接

/path/to/redis/bin/redis-server? ./path/to/conf-file

例:[root@localhost redis]# ./bin/redis-server ./redis.conf

?

連接: 用redis-cli

#/path/to/redis/bin/redis-cli [-h localhost -p 6379 ]

?

?

10: 讓redis以后臺進程的形式運行

編輯conf配置文件,修改如下內容;

daemonize yes

Redis對于key的操作命令

?

del key1 key2 ... Keyn

作用: 刪除1個或多個鍵

返回值: 不存在的key忽略掉,返回真正刪除的key的數量

?

rename key newkey

作用: 給key賦一個新的key名

注:如果newkey已存在,則newkey的原值被覆蓋

?

renamenx key newkey?

作用: 把key改名為newkey

返回: 發生修改返回1,未發生修改返回0

注: nx--> not exists, 即, newkey不存在時,作改名動作

?

move key db

redis 127.0.0.1:6379[1]> select 2

OK

redis 127.0.0.1:6379[2]> keys *

(empty list or set)

redis 127.0.0.1:6379[2]> select 0

OK

redis 127.0.0.1:6379> keys *

1) "name"

2) "cc"

3) "a"

4) "b"

redis 127.0.0.1:6379> move cc 2

(integer) 1

redis 127.0.0.1:6379> select 2

OK

redis 127.0.0.1:6379[2]> keys *

1) "cc"

redis 127.0.0.1:6379[2]> get cc

"3"

?

?

(注意: 一個redis進程,打開了不止一個數據庫, 默認打開16個數據庫,從0到15編號,

如果想打開更多數據庫,可以從配置文件修改)

?

keys pattern 查詢相應的key

在redis里,允許模糊查詢key

有3個通配符 *, ? ,[]

*: 通配任意多個字符

?: 通配單個字符

[]: 通配括號內的某1個字符

redis 127.0.0.1:6379> flushdb

OK

redis 127.0.0.1:6379> keys *

(empty list or set)

redis 127.0.0.1:6379> mset one 1 two 2 three 3 four 4

OK

redis 127.0.0.1:6379> keys o*

1) "one"

redis 127.0.0.1:6379> key *o

(error) ERR unknown command 'key'

redis 127.0.0.1:6379> keys *o

1) "two"

redis 127.0.0.1:6379> keys ???

1) "one"

2) "two"

redis 127.0.0.1:6379> keys on?

1) "one"

redis 127.0.0.1:6379> set ons yes

OK

redis 127.0.0.1:6379> keys on[eaw]

1) "one"

?

?

randomkey 返回隨機key

?

exists key

判斷key是否存在,返回1/0

?

?

type key

返回key存儲的值的類型

有string,link,set,order set, hash

?

?

?

?

?

?

?

?

ttl key

作用: 查詢key的生命周期

返回: 秒數

?

注:對于不存在的key或已過期的key/不過期的key,都返回-1

Redis2.8中,對于不存在的key,返回-2

?

expire key 整型值

作用: 設置key的生命周期,以秒為單位

?

同理:

pexpire key 毫秒數, 設置生命周期

pttl? key, 以毫秒返回生命周期

?

?

persist key

作用: 把指定key置為永久有效

Redis字符串類型的操作

?

set key value [ex 秒數] / [px 毫秒數]? [nx] /[xx]

?

如: set a 1 ex 10 , 10秒有效

Set a 1 px 9000? , 9秒有效

注: 如果ex,px同時寫,以后面的有效期為準

如 set a 1 ex 100 px 9000, 實際有效期是9000毫秒

?

nx: 表示key不存在時,執行操作

xx: 表示key存在時,執行操作

?

?

mset? multi set , 一次性設置多個鍵值

例: mset key1 v1 key2 v2 ....

?

get key

作用:獲取key的值

?

mget key1 key2 ..keyn

作用:獲取多個key的值

?

?

setrange key offset value

作用:把字符串的offset偏移字節,改成value

redis 127.0.0.1:6379> set greet hello

OK

redis 127.0.0.1:6379> setrange greet 2 x

(integer) 5

redis 127.0.0.1:6379> get greet

"hexlo"

?

注意: 如果偏移量>字符長度, 該字符自動補0x00

?

redis 127.0.0.1:6379> setrange greet 6 !

(integer) 7

redis 127.0.0.1:6379> get greet

"heyyo\x00!"

?

?

?

append key value

作用: 把value追加到key的原值上

?

getrange key start stop

作用: 是獲取字符串中 [start, stop]范圍的值

注意: 對于字符串的下標,左數從0開始,右數從-1開始

redis 127.0.0.1:6379> set title 'chinese'

OK

redis 127.0.0.1:6379> getrange title 0 3

"chin"

redis 127.0.0.1:6379> getrange title 1 -2

"hines"

?

注意:

1: start>=length, 則返回空字符串

2: stop>=length,則截取至字符結尾

3: 如果start 所處位置在stop右邊, 返回空字符串

?

?

?

getset key newvalue

作用: 獲取并返回舊值,設置新值

redis 127.0.0.1:6379> set cnt 0

OK

redis 127.0.0.1:6379> getset cnt 1

"0"

redis 127.0.0.1:6379> getset cnt 2

"1"

?

incr key

作用: 指定的key的值加1,并返回加1后的值

?

注意:

1:不存在的key當成0,再incr操作

2: 范圍為64有符號

?

incrby key number

redis 127.0.0.1:6379> incrby age? 90

(integer) 92

?

incrbyfloat key floatnumber

redis 127.0.0.1:6379> incrbyfloat age 3.5

"95.5"

?

decr key

redis 127.0.0.1:6379> set age 20

OK

redis 127.0.0.1:6379> decr age

(integer) 19

?

decrby key number

redis 127.0.0.1:6379> decrby age 3

(integer) 16

?

getbit key offset

作用:獲取值的二進制表示,對應位上的值(從左,從0編號)

redis 127.0.0.1:6379> set char A

OK

redis 127.0.0.1:6379> getbit char 1

(integer) 1

redis 127.0.0.1:6379> getbit char 2

(integer) 0

redis 127.0.0.1:6379> getbit char 7

(integer) 1

?

?

setbit? key offset value

設置offset對應二進制位上的值

返回: 該位上的舊值

?

注意:

1:如果offset過大,則會在中間填充0,

2: offset最大大到多少

3:offset最大2^32-1,可推出最大的的字符串為512M

?

?

bitop operation destkey key1 [key2 ...]

?

對key1,key2..keyN作operation,并將結果保存到 destkey 上。

operation 可以是 AND 、 OR 、 NOT 、 XOR

?

redis 127.0.0.1:6379> setbit lower 7 0

(integer) 0

redis 127.0.0.1:6379> setbit lower 2 1

(integer) 0

redis 127.0.0.1:6379> get lower

" "

redis 127.0.0.1:6379> set char Q

OK

redis 127.0.0.1:6379> get char

"Q"

redis 127.0.0.1:6379> bitop or char char lower

(integer) 1

redis 127.0.0.1:6379> get char

"q"

?

注意: 對于NOT操作, key不能多個

link 鏈表結構

?

lpush key value

作用: 把值插入到鏈接頭部

?

rpop key

作用: 返回并刪除鏈表尾元素

?

rpush,lpop: 不解釋

?

lrange key start? stop

作用: 返回鏈表中[start ,stop]中的元素

規律: 左數從0開始,右數從-1開始

?

?

lrem key count value

作用: 從key鏈表中刪除 value值

注: 刪除count的絕對值個value后結束

Count>0 從表頭刪除

Count<0 從表尾刪除

?

ltrim key start stop

作用: 剪切key對應的鏈接,切[start,stop]一段,并把該段重新賦給key

?

lindex key index

作用: 返回index索引上的值,

如? lindex key 2

?

llen key

作用:計算鏈接表的元素個數

redis 127.0.0.1:6379> llen task

(integer) 3

redis 127.0.0.1:6379>

?

linsert? key after|before search value

作用: 在key鏈表中尋找’search’,并在search值之前|之后,.插入value

注: 一旦找到一個search后,命令就結束了,因此不會插入多個value

?

?

rpoplpush source dest

作用: 把source的尾部拿出,放在dest的頭部,

并返回 該單元值

?

場景: task + bak 雙鏈表完成安全隊列

Task列表???????????????????????????? bak列表

?

?

業務邏輯:

1:Rpoplpush task bak

2:接收返回值,并做業務處理

3:如果成功,rpop bak 清除任務. 如不成功,下次從bak表里取任務

?

?

brpop ,blpop? key timeout

作用:等待彈出key的尾/頭元素,

Timeout為等待超時時間

如果timeout為0,則一直等待

?

場景: 長輪詢Ajax,在線聊天時,能夠用到

Setbit 的實際應用

?

場景: 1億個用戶, 每個用戶 登陸/做任意操作? ,記為 今天活躍,否則記為不活躍

?

每周評出: 有獎活躍用戶: 連續7天活動

每月評,等等...

?

思路:

?

Userid?? dt? active

1??????? 2013-07-27? 1

1?????? 2013-0726?? 1

?

如果是放在表中, 1:表急劇增大,2:要用group ,sum運算,計算較慢

?

?

用: 位圖法 bit-map

Log0721:? ‘011001...............0’

?

......

log0726 :?? ‘011001...............0’

Log0727 :? ‘0110000.............1’

?

?

1: 記錄用戶登陸:

每天按日期生成一個位圖, 用戶登陸后,把user_id位上的bit值置為1

?

2: 把1周的位圖? and 計算,

位上為1的,即是連續登陸的用戶

?

?

redis 127.0.0.1:6379> setbit mon 100000000 0

(integer) 0

redis 127.0.0.1:6379> setbit mon 3 1

(integer) 0

redis 127.0.0.1:6379> setbit mon 5 1

(integer) 0

redis 127.0.0.1:6379> setbit mon 7 1

(integer) 0

redis 127.0.0.1:6379> setbit thur 100000000 0

(integer) 0

redis 127.0.0.1:6379> setbit thur 3 1

(integer) 0

redis 127.0.0.1:6379> setbit thur 5 1

(integer) 0

redis 127.0.0.1:6379> setbit thur 8 1

(integer) 0

redis 127.0.0.1:6379> setbit wen 100000000 0

(integer) 0

redis 127.0.0.1:6379> setbit wen 3 1

(integer) 0

redis 127.0.0.1:6379> setbit wen 4 1

(integer) 0

redis 127.0.0.1:6379> setbit wen 6 1

(integer) 0

????? ?????????????????把值儲存到res

redis 127.0.0.1:6379> bitop and? res mon feb wen

(integer) 12500001

getbit res 1(地幾位)

?

如上例,優點:

1: 節約空間, 1億人每天的登陸情況,用1億bit,約1200WByte,約10M 的字符就能表示

2: 計算方便

?

?

?

?

?

?

?

?

?

?

?

?

?

?

?

?

?

?

?

?

?

?

?

?

?

?

集合 set 相關命令

?

集合的性質: 唯一性,無序性,確定性

?

注: 在string和link的命令中,可以通過range 來訪問string中的某幾個字符或某幾個元素

但,因為集合的無序性,無法通過下標或范圍來訪問部分元素.

?

因此想看元素,要么隨機先一個,要么全選

?

sadd key? value1 value2

作用: 往集合key中增加元素

?

srem value1 value2

作用: 刪除集合中集為 value1 value2的元素

返回值: 忽略不存在的元素后,真正刪除掉的元素的個數

?

spop key

作用: 返回并刪除集合中key中1個隨機元素

?

隨機--體現了無序性

?

srandmember key

作用: 返回集合key中,隨機的1個元素.

?

sismember key? value

作用: 判斷value是否在key集合中

是返回1,否返回0

?

smembers key

作用: 返回集中中所有的元素

?

scard key

作用: 返回集合中元素的個數

?

smove source dest value

作用:把source中的value刪除,并添加到dest集合中

?

?

?

sinter? key1 key2 key3

作用: 求出key1 key2 key3 三個集合中的交集,并返回

redis 127.0.0.1:6379> sadd s1 0 2 4 6

(integer) 4

redis 127.0.0.1:6379> sadd s2 1 2 3 4

(integer) 4

redis 127.0.0.1:6379> sadd s3 4 8 9 12

(integer) 4

redis 127.0.0.1:6379> sinter s1 s2 s3

1) "4"

redis 127.0.0.1:6379> sinter s3 s1 s2

1) "4"

?

sinterstore dest key1 key2 key3

作用: 求出key1 key2 key3 三個集合中的交集,并賦給dest

?

?

suion key1 key2.. Keyn

作用: 求出key1 key2 keyn的并集,并返回

?

sdiff key1 key2 key3

作用: 求出key1與key2 key3的差集

即key1-key2-key3

?

order set 有序集合

zadd key score1 value1 score2 value2 ..

添加元素

redis 127.0.0.1:6379> zadd stu 18 lily 19 hmm 20 lilei 21 lilei

(integer) 3

?

zrem key value1 value2 ..

作用: 刪除集合中的元素

?

zremrangebyscore key min max

作用: 按照socre來刪除元素,刪除score在[min,max]之間的

redis 127.0.0.1:6379> zremrangebyscore stu 4 10

(integer) 2

redis 127.0.0.1:6379> zrange stu 0 -1

1) "f"

?

zremrangebyrank key start end

作用: 按排名刪除元素,刪除名次在[start,end]之間的

redis 127.0.0.1:6379> zremrangebyrank stu 0 1

(integer) 2

redis 127.0.0.1:6379> zrange stu 0 -1

1) "c"

2) "e"

3) "f"

4) "g"

?

zrank key member

查詢member的排名(升續 0名開始)

?

zrevrank key memeber

查詢 member的排名(降續 0名開始)

?

ZRANGE key start stop [WITHSCORES]

把集合排序后,返回名次[start,stop]的元素

默認是升續排列

Withscores 是把score也打印出來

?

zrevrange key start stop

作用:把集合降序排列,取名字[start,stop]之間的元素

?

zrangebyscore? key min max [withscores] limit offset N

作用: 集合(升續)排序后,取score在[min,max]內的元素,

并跳過 offset個, 取出N個

redis 127.0.0.1:6379> zadd stu 1 a 3 b 4 c 9 e 12 f 15 g

(integer) 6

redis 127.0.0.1:6379> zrangebyscore stu 3 12 limit 1 2 withscores

1) "c"

2) "4"

3) "e"

4) "9"

?

?

zcard key

返回元素個數

?

zcount key min max

返回[min,max] 區間內元素的數量

?

?

zinterstore destination numkeys key1 [key2 ...]

[WEIGHTS weight [weight ...]]

[AGGREGATE SUM|MIN|MAX]

求key1,key2的交集,key1,key2的權重分別是 weight1,weight2

聚合方法用: sum |min|max

聚合的結果,保存在dest集合內

?

注意: weights ,aggregate如何理解?

答: 如果有交集, 交集元素又有socre,score怎么處理?

?Aggregate sum->score相加?? , min 求最小score, max 最大score

?

另: 可以通過weigth設置不同key的權重, 交集時,socre * weights

?

詳見下例

redis 127.0.0.1:6379> zadd z1 2 a 3 b 4 c

(integer) 3

redis 127.0.0.1:6379> zadd z2 2.5 a 1 b 8 d

(integer) 3

redis 127.0.0.1:6379> zinterstore tmp 2 z1 z2

(integer) 2

redis 127.0.0.1:6379> zrange tmp 0 -1

1) "b"

2) "a"

redis 127.0.0.1:6379> zrange tmp 0 -1 withscores

1) "b"

2) "4"

3) "a"

4) "4.5"

redis 127.0.0.1:6379> zinterstore tmp 2 z1 z2 aggregate sum

(integer) 2

redis 127.0.0.1:6379> zrange tmp 0 -1 withscores

1) "b"

2) "4"

3) "a"

4) "4.5"

redis 127.0.0.1:6379> zinterstore tmp 2 z1 z2 aggregate min

(integer) 2

redis 127.0.0.1:6379> zrange tmp 0 -1 withscores

1) "b"

2) "1"

3) "a"

4) "2"

redis 127.0.0.1:6379> zinterstore tmp 2 z1 z2 weights 1 2

(integer) 2

redis 127.0.0.1:6379> zrange tmp 0 -1 withscores

1) "b"

2) "5"

3) "a"

4) "7"

?

?

?

?

?

?

Hash 哈希數據類型相關命令

?

hset key field value

作用: 把key中 filed域的值設為value

注:如果沒有field域,直接添加,如果有,則覆蓋原field域的值

?

hmset key field1 value1 [field2 value2 field3 value3 ......fieldn valuen]

作用: 設置field1->N 個域, 對應的值是value1->N

(對應PHP理解為? $key = array(file1=>value1, field2=>value2 ....fieldN=>valueN))

?

?

hget key field

作用: 返回key中field域的值

?

hmget key field1 field2 fieldN

作用: 返回key中field1 field2 fieldN域的值

?

hgetall key

作用:返回key中,所有域與其值

?

hdel key field

作用: 刪除key中 field域

?

hlen key

作用: 返回key中元素的數量

?

hexists key field

作用: 判斷key中有沒有field域

?

hinrby key field value

作用: 是把key中的field域的值增長整型值value

?

hinrby float? key field value

作用: 是把key中的field域的值增長浮點值value

?

hkeys key

作用: 返回key中所有的field

?

kvals key

作用: 返回key中所有的value

?

Redis 中的事務

?

Redis支持簡單的事務

?

Redis與 mysql事務的對比

?

?

Mysql

Redis

開啟

start transaction

muitl

語句

普通sql

普通命令

失敗

rollback 回滾

discard 取消

成功

commit

exec

?

注: rollback與discard 的區別

如果已經成功執行了2條語句, 第3條語句出錯.

Rollback后,前2條的語句影響消失.

Discard只是結束本次事務,前2條語句造成的影響仍然還在

?

注:

在mutil后面的語句中, 語句出錯可能有2種情況

1: 語法就有問題,

這種,exec時,報錯, 所有語句得不到執行

?

2: 語法本身沒錯,但適用對象有問題. 比如 zadd 操作list對象

Exec之后,會執行正確的語句,并跳過有不適當的語句.

?

(如果zadd操作list這種事怎么避免? 這一點,由程序員負責)

?

?

思考:

我正在買票

Ticket -1 , money -100

而票只有1張, 如果在我multi之后,和exec之前, 票被別人買了---即ticket變成0了.

我該如何觀察這種情景,并不再提交

?

悲觀的想法:

世界充滿危險,肯定有人和我搶, 給 ticket上鎖, 只有我能操作. [悲觀鎖]

?

樂觀的想法:

沒有那么人和我搶,因此,我只需要注意,

--有沒有人更改ticket的值就可以了 [樂觀鎖]

?

Redis的事務中,啟用的是樂觀鎖,只負責監測key沒有被改動.

?

?

具體的命令----? watch命令

例:

redis 127.0.0.1:6379> watch ticket

OK

redis 127.0.0.1:6379> multi

OK

redis 127.0.0.1:6379> decr ticket

QUEUED

redis 127.0.0.1:6379> decrby money 100

QUEUED

redis 127.0.0.1:6379> exec

(nil)?? // 返回nil,說明監視的ticket已經改變了,事務就取消了.

redis 127.0.0.1:6379> get ticket

"0"

redis 127.0.0.1:6379> get money

"200"

?

?

watch key1 key2? ... keyN

作用:監聽key1 key2..keyN有沒有變化,如果有變, 則事務取消

?

unwatch

作用: 取消所有watch監聽

?

?

?

?

?

?

消息訂閱

?

使用辦法:

訂閱端: Subscribe 頻道名稱

發布端: publish 頻道名稱 發布內容

?

客戶端例子:

redis 127.0.0.1:6379> subscribe news

Reading messages... (press Ctrl-C to quit)

1) "subscribe"

2) "news"

3) (integer) 1

1) "message"

2) "news"

3) "good good study"

1) "message"

2) "news"

3) "day day up"

?

服務端例子:

redis 127.0.0.1:6379> publish news 'good good study'

(integer) 1

redis 127.0.0.1:6379> publish news 'day day up'

(integer) 1

?

?

?

?

?

?

?

Redis持久化配置

?

Redis的持久化有2種方式?? 1快照? 2是日志

?

Rdb快照的配置選項

?

save 900 1????? // 900內,有1條寫入,則產生快照

save 300 1000?? // 如果300秒內有1000次寫入,則產生快照

save 60 10000? // 如果60秒內有10000次寫入,則產生快照

(這3個選項都屏蔽,則rdb禁用)

?

stop-writes-on-bgsave-error yes? // 后臺備份進程出錯時,主進程停不停止寫入?

rdbcompression yes??? // 導出的rdb文件是否壓縮

Rdbchecksum?? yes //? 導入rbd恢復時數據時,要不要檢驗rdb的完整性

dbfilename dump.rdb? //導出來的rdb文件名

dir ./? //rdb的放置路徑

?

?

?

Aof 的配置

appendonly no # 是否打開 aof日志功能

?

appendfsync always?? # 每1個命令,都立即同步到aof. 安全,速度慢

appendfsync everysec # 折衷方案,每秒寫1次

appendfsync no????? # 寫入工作交給操作系統,由操作系統判斷緩沖區大小,統一寫入到aof. 同步頻率低,速度快,

?

?

no-appendfsync-on-rewrite ?yes: # 正在導出rdb快照的過程中,要不要停止同步aof

auto-aof-rewrite-percentage 100 #aof文件大小比起上次重寫時的大小,增長率100%時,重寫

auto-aof-rewrite-min-size 64mb #aof文件,至少超過64M時,重寫

?

?

注: 在dump rdb過程中,aof如果停止同步,會不會丟失?

答: 不會,所有的操作緩存在內存的隊列里, dump完成后,統一操作.

?

注: aof重寫是指什么?

答: aof重寫是指把內存中的數據,逆化成命令,寫入到.aof日志里.

以解決 aof日志過大的問題.

?

問: 如果rdb文件,和aof文件都存在,優先用誰來恢復數據?

答: aof

?

問: 2種是否可以同時用?

答: 可以,而且推薦這么做

?

問: 恢復時rdb和aof哪個恢復的快

答: rdb快,因為其是數據的內存映射,直接載入到內存,而aof是命令,需要逐條執行

redis 服務器端命令

redis 127.0.0.1:6380> time? ,顯示服務器時間 , 時間戳(秒), 微秒數

1) "1375270361"

2) "504511"

?

redis 127.0.0.1:6380> dbsize? // 當前數據庫的key的數量

(integer) 2

redis 127.0.0.1:6380> select 2

OK

redis 127.0.0.1:6380[2]> dbsize

(integer) 0

redis 127.0.0.1:6380[2]>

?

?

BGREWRITEAOF 后臺進程重寫AOF

BGSAVE?????? 后臺保存rdb快照

SAVE???????? 保存rdb快照

LASTSAVE???? 上次保存時間

?

Slaveof master-Host port? , 把當前實例設為master的slave

?

Flushall? 清空所有庫所有鍵

Flushdb? 清空當前庫所有鍵

Showdown [save/nosave]

?

注: 如果不小心運行了flushall, 立即 shutdown nosave ,關閉服務器

然后 手工編輯aof文件, 去掉文件中的 “flushall ”相關行, 然后開啟服務器,就可以導入回原來數據.

?

如果,flushall之后,系統恰好bgrewriteaof了,那么aof就清空了,數據丟失.

?

Slowlog 顯示慢查詢

注:多慢才叫慢?

答: 由slowlog-log-slower-than 10000 ,來指定,(單位是微秒)

?

服務器儲存多少條慢查詢的記錄?

答: 由 slowlog-max-len 128 ,來做限制

?

Info [Replication/CPU/Memory..]

查看redis服務器的信息

?

Config get 配置項?

Config set 配置項 值 (特殊的選項,不允許用此命令設置,如slave-of, 需要用單獨的slaveof命令來設置)

Redis運維時需要注意的參數

1: 內存

# Memory

used_memory:859192 數據結構的空間

used_memory_rss:7634944 實占空間

mem_fragmentation_ratio:8.89 前2者的比例,1.N為佳,如果此值過大,說明redis的內存的碎片化嚴重,可以導出再導入一次.

2: 主從復制

# Replication

role:slave

master_host:192.168.1.128

master_port:6379

master_link_status:up

?

3:持久化

# Persistence

rdb_changes_since_last_save:0

rdb_last_save_time:1375224063

?

4: fork耗時

#Status

latest_fork_usec:936? 上次導出rdb快照,持久化花費微秒

注意: 如果某實例有10G內容,導出需要2分鐘,

每分鐘寫入10000次,導致不斷的rdb導出,磁盤始處于高IO狀態.

?

?

5: 慢日志

config get/set slowlog-log-slower-than

CONFIG get/SET slowlog-max-len

slowlog get N 獲取慢日志

運行時更改master-slave

修改一臺slave(設為A)為new master

1) 命令該服務不做其他redis服務的slave

?? 命令: slaveof no one

2) 修改其readonly為yes

?

其他的slave再指向new master A

1) 命令該服務為new master A的slave

?? 命令格式 slaveof IP port

?

Sentinel不斷與master通信,獲取master的slave信息.

監聽master與slave的狀態

如果某slave失效,直接通知master去除該slave.

?

如果master失效,,是按照slave優先級(可配置), 選取1個slave做 new master

,把其他slave--> new master

?

疑問: sentinel與master通信,如果某次因為master IO操作頻繁,導致超時,

此時,認為master失效,很武斷.

解決: sentnel允許多個實例看守1個master, 當N臺(N可設置)sentinel都認為master失效,才正式失效.

?

Sentinel選項配置

port 26379 # 端口

sentinel monitor mymaster 127.0.0.1 6379 2 ,

給主機起的名字(不重即可),

當2個sentinel實例都認為master失效時,正式失效

?

sentinel down-after-milliseconds mymaster 30000? 多少毫秒后連接不到master認為斷開

sentinel can-failover mymaster yes #是否允許sentinel修改slave->master. 如為no,則只能監控,無權修改./

sentinel parallel-syncs mymaster 1 , 一次性修改幾個slave指向新的new master.

sentinel client-reconfig-script mymaster /var/redis/reconfig.sh ,# 在重新配置new master,new slave過程,可以觸發的腳本

redis 與關系型數據庫的適合場景

?

書簽系統

create table book (

bookid int,

title char(20)

)engine myisam charset utf8;

?

insert into book values

(5 , 'PHP圣經'),

(6 , 'ruby實戰'),

(7 , 'mysql運維')

(8, 'ruby服務端編程');

?

?

create table tags (

tid int,

bookid int,

content char(20)

)engine myisam charset utf8;

?

insert into tags values

(10 , 5 , 'PHP'),

(11 , 5 , 'WEB'),

(12 , 6 , 'WEB'),

(13 , 6 , 'ruby'),

(14 , 7 , 'database'),

(15 , 8 , 'ruby'),

(16 , 8 , 'server');

?

# 既有web標簽,又有PHP,同時還標簽的書,要用連接查詢

?

select * from tags inner join tags as t on tags.bookid=t.bookid

where tags.content='PHP' and t.content='WEB';

?

?

換成key-value存儲

用kv 來存儲

set book:5:title 'PHP圣經'

set book:6:title 'ruby實戰'

set book:7:title 'mysql運難'

set book:8:title ‘ruby server’

?

sadd tag:PHP 5

sadd tag:WEB 5 6

sadd tag:database 7

sadd tag:ruby 6 8

sadd tag:SERVER 8

?

查: 既有PHP,又有WEB的書

Sinter tag:PHP tag:WEB? #查集合的交集

?

查: 有PHP或有WEB標簽的書

Sunin tag:PHP tag:WEB

?

查:含有ruby,不含WEB標簽的書

Sdiff tag:ruby tag:WEB #求差集

?

?

?

?

Redis key 設計技巧

?

1: 把表名轉換為key前綴 如, tag:

2: 第2段放置用于區分區key的字段--對應mysql中的主鍵的列名,如userid

3: 第3段放置主鍵值,如2,3,4...., a , b ,c

4: 第4段,寫要存儲的列名

?

用戶表 user? , 轉換為key-value存儲

userid

username

passworde

email

9

Lisi

1111111

lisi@163.com

?

set? user:userid:9:username lisi

set? user:userid:9:password 111111

set? user:userid:9:email?? lisi@163.com

?

keys user:userid:9*

?

?

2 注意:

在關系型數據中,除主鍵外,還有可能其他列也步驟查詢,

如上表中, username 也是極頻繁查詢的,往往這種列也是加了索引的.

?

轉換到k-v數據中,則也要相應的生成一條按照該列為主的key-value

Set? user:username:lisi:uid? 9?

?

這樣,我們可以根據username:lisi:uid ,查出userid=9,

再查user:9:password/email ...

?

完成了根據用戶名來查詢用戶信息

php-redis擴展編譯

?

1: 到pecl.php.net? 搜索redis

2: 下載stable版(穩定版)擴展

3: 解壓,

4: 執行/php/path/bin/phpize (作用是檢測PHP的內核版本,并為擴展生成相應的編譯配置)

5: configure --with-php-config=/php/path/bin/php-config

6: make && make install

?

引入編譯出的redis.so插件

1: 編輯php.ini

2: 添加

?

?

redis插件的使用

// get instance

$redis = new Redis();

?

// connect to redis server

$redis->open('localhost',6380);

$redis->set('user:userid:9:username','wangwu');

var_dump($redis->get('user:userid:9:username'));

?

?

?

?

?

?

?

微博項目的key設計

全局相關的key:

表名

global

列名

操作

備注

Global:userid

incr

產生全局的userid

Global:postid

Incr

產生全局的postid

?

?

用戶相關的key(表)

表名

user

Userid

Username

Password

Authsecret

3

Test3

1111111

#U*Q(%_

?

在redis中,變成以下幾個key

Key前綴

user

User:Userid:*

User:userid:*Username

User:userid:*Password

User:userid:*:Authsecret

User:userid:3

User:userid:3:Test3

User:userid:3:1111111

User:userid:3:#U*Q(%_

?

?

微博相關的表設計

表名

post

?

?

?

Postid

Userid

Username

Time

Content

4

2

Lisi

1370987654f

測試內容

?

微博在redis中,與表設計對應的key設計

Key前綴

post

?

?

?

Post:Postid:*

Post:postid:*Userid

Post:postid:*:Username

Post:postid:*:Time

Post:postid:*:Content

4

2

Lisi

1370987654f

測試內容

?

關注表: following

Following:$userid -->set

?

?

粉絲表

Follower:$userid --->??set

?

?

?

推送表:revicepost

Recivepost:$userid

?

?

?

?
??

?

?

?

?

=================拉模型,改進=====================

?

拉取表

Pull:$userid:

?

?

?

?
??

?

?

?

問: 上次我拉取了 A->5,67,三條微博, 下次刷新home.php, 從>7的微博開始拉取

解決: 拉取時,設定一個lastpull時間點, 下次拉取時,取>lastpull的微博

?

問: 有很多關注人,如何取?

解決: 循環自己的關注列表,逐個取他們的新微博

?

問: 取出來之后放在哪兒?

答: pull:$userid的鏈接里

?

問: 如果個人中心,只有前1000條

答: ltrim,只取前1000條

?

?

問: 如果我關注 A,B兩人, 從2人中,各取3條最新信息

,這3+3條信息, 從時間上,是交錯的, 如何按時間排序?

答: 我們發布時, 是發布的hash結構, 不能按時間來排序.

?

解決:? 同步時,取微博后,記錄本次取的微博的最大id,

下次同步時,只取比最大id更大的微博

?

?

Time taken for tests:?? 32.690 seconds

Complete requests:????? 20000

Failed requests:??????? 0

Write errors:?????????? 0

Non-2xx responses:????? 20000

Total transferred:????? 13520000 bytes

Total POSTed:?????????? 5340000

HTML transferred:?????? 9300000 bytes

Requests per second:??? 611.80 [#/sec] (mean)

Time per request:?????? 81.726 [ms] (mean)

Time per request:?????? 1.635 [ms] (mean, across all concurrent requests)

Transfer rate:???????? ?403.88 [Kbytes/sec] received

??????????????????????? 159.52 kb/s sent

??????????????????????? 563.41 kb/s total

?

Connection Times (ms)

????????????? min? mean[+/-sd] median?? max

Connect:??????? 0??? 0?? 0.9????? 0????? 19

Processing:??? 14?? 82?? 8.4??? ?81???? 153

Waiting:??????? 4?? 82?? 8.4???? 80???? 153

Total:???????? 20?? 82?? 8.2???? 81???? 153

?

Percentage of the requests served within a certain time (ms)

? 50%???? 81

? 66%???? 84

? 75%???? 86

? 80%???? 88

? 90%???? 93

? 95%???? 96

? 98%??? 100

? 99%??? 103

?100%??? 153 (longest request)

?

?

測試結果:

50個并發, 20000次請求, 虛擬下,未做特殊優化

每次請求redis寫操作6次.

30+秒左右完成.

?

平均每秒發布700條微博, 4000次redis寫入.

后臺定時任務,回歸冷數據入mysql

Redis配置文件

?daemonize yes? # redis是否以后臺進程運行

?Requirepass? 密碼 # 配置redis連接的密碼

注:配置密碼后,客戶端連上服務器,需要先執行授權命令

# auth 密碼

?

轉載于:https://www.cnblogs.com/chengfengchi/p/10373497.html

本文來自互聯網用戶投稿,該文觀點僅代表作者本人,不代表本站立場。本站僅提供信息存儲空間服務,不擁有所有權,不承擔相關法律責任。
如若轉載,請注明出處:http://www.pswp.cn/news/449942.shtml
繁體地址,請注明出處:http://hk.pswp.cn/news/449942.shtml
英文地址,請注明出處:http://en.pswp.cn/news/449942.shtml

如若內容造成侵權/違法違規/事實不符,請聯系多彩編程網進行投訴反饋email:809451989@qq.com,一經查實,立即刪除!

相關文章

Android應用開發——onStop的調用時機

onStop的調用時機&#xff0c;網上搜索到的說法大概是&#xff1a;“ onStop的調用是“The activity is no longer visible”&#xff0c;也就是完全不可見的時候調用的&#xff0c;這個完全不可見真的就是指視覺上的完全看不到而已&#xff0c;無論是按home鍵返回桌面&#xf…

UnaryOperator函數式接口

2019獨角獸企業重金招聘Python工程師標準>>> 這是一個函數式接口&#xff0c;因此可以用作lambda表達式或方法引用的賦值目標。 可以看到UnaryOperator<T>繼承了Function<T,T>接口&#xff0c;這里可是兩個T,T,還增加了static修飾的identity()方法。 然…

從程序員到項目經理

推薦研發工程師必看的內容 從程序員到項目經理 從程序員到項目經理”&#xff0c;這個標題讓我想起了很久以前一本書的名字《從Javascript到Java》。然而&#xff0c;從Javascript到Java充其量只是工具的更新&#xff0c;而從程序員到項目經理&#xff0c;卻是一個脫胎換骨的過…

linux--命令rcp和scp

前些天發現了一個巨牛的人工智能學習網站&#xff0c;通俗易懂&#xff0c;風趣幽默&#xff0c;忍不住分享一下給大家。點擊跳轉到教程。 rcp代表“remote file copy”&#xff08;遠程文件拷貝&#xff09;。該命令用于在計算機之間拷貝文件。rcp命令有兩種格式。第一種格式…

Android Camera 2.0 Api

二次圖像處理 Camera2的API擴展了對YUV的支持&#xff0c;及圖像再處理支持。要知道是否據有這個能力&#xff0c;可以調getCameraCharacteristics()方法&#xff0c;檢查REPROCESS_MAX_CAPTURE_STALL這個鍵值 。如果設備支持再處理&#xff0c;則可以調用createReprocessableC…

scala-數組操作

package com.bigdataimport scala.collection.mutable.ArrayBufferobject ArrayO {def main(args: Array[String]): Unit {val arrayBuffer ArrayBuffer[Int]()//默認情況下都是在ArrayBuffer末尾增加元素arrayBuffer 1arrayBuffer (4,5,6,7,8,9,10)arrayBuffer Array(1,2…

spring cloud微服務分布式云架構 - Spring Cloud集成項目簡介

Spring Cloud集成項目有很多&#xff0c;下面我們列舉一下和Spring Cloud相關的優秀項目&#xff0c;我們的企業架構中用到了很多的優秀項目&#xff0c;說白了&#xff0c;也是站在巨人的肩膀上去整合的。在學習Spring Cloud之前大家必須了解一下相關項目&#xff0c;希望可以…

Nokia落寞身影下 三星成為全球最大手機廠商

摘要&#xff1a;在諾基亞統治全球最大手機廠商寶座長達14年后&#xff0c;三星今年首次取代諾基亞&#xff0c;成為全球最大手機廠商。據IHS iSuppli的數據顯示&#xff0c;三星預計今年手機出貨量將占全球29&#xff05;&#xff0c;而落寞的諾基亞市場份額將下降到24&#x…

Linux中cp和scp命令的使用方法

前些天發現了一個巨牛的人工智能學習網站&#xff0c;通俗易懂&#xff0c;風趣幽默&#xff0c;忍不住分享一下給大家。點擊跳轉到教程。 Linux為我們提供了兩個用于文件copy的命令&#xff0c;一個是cp&#xff0c;一個是scp&#xff0c;但是他們略有不同。 cp --- 主要是用…

Django:學習筆記(2)——創建第一個應用

Django&#xff1a;學習筆記(2)——創建第一個應用 創建應用 在 Django 中&#xff0c;每一個應用都是一個 Python 包&#xff0c;并且遵循著相同的約定。Django 自帶一個工具&#xff0c;可以幫你生成應用的基礎目錄結構&#xff0c;這樣你就能專心寫代碼&#xff0c;而不是創…

dubbo源碼解析(十)遠程通信——Exchange層

遠程通訊——Exchange層 目標&#xff1a;介紹Exchange層的相關設計和邏輯、介紹dubbo-remoting-api中的exchange包內的源碼解析。前言 上一篇文章我講的是dubbo框架設計中Transport層&#xff0c;這篇文章我要講的是它的上一層Exchange層&#xff0c;也就是信息交換層。官方文…

嵌入式軟件開發工程師談軟件架構的設計

嵌入式軟件開發工程師談軟件架構的設計 注&#xff1a;此處嵌入式特指基于linux平臺&#xff0c;單片機和其他rtos不在討論范圍 筆者從事嵌入式軟件開發有6&#xff0c;7個年頭&#xff0c;bsp&#xff0c;驅動&#xff0c;應用軟件&#xff0c;android hall&#xff0c;fram…

為何獲得風險投資的公司多數倒閉了?

北京時間12月12日消息&#xff0c;據國外媒體報道&#xff0c;哈佛商學院的高級講師施克哈爾高希(Shikhar Ghosh)指出&#xff0c;風險投資領域的失敗案例比媒體報道的要多得多。 高希的研究表明&#xff0c;在風險資本支持的公司之中&#xff0c;有75%的公司從未向投資者返回過…

Linux rm命令、Linux touch命令、Linux tee命令

前些天發現了一個巨牛的人工智能學習網站&#xff0c;通俗易懂&#xff0c;風趣幽默&#xff0c;忍不住分享一下給大家。點擊跳轉到教程。 Linux rm命令用于刪除一個文件或者目錄。 語法 rm [options] name...[options] name... 參數&#xff1a; -i 刪除前逐一詢問確認。…

highCharts使用中問題總結

想出一張圖表&#xff0c;數據是多條線體&#xff0c;45天的數據展示最近15天的。并且每次展示其中一條。可以切換時間看前面的 或者后面的。最開始遇到的問題是&#xff0c;展示一條線體成功&#xff0c;但是在切換線體的時候&#xff0c;成功但是接著刷新到最開始的狀態。跟同…

基于pjsip實現p2p語音對講

目的 為實現跨網絡的語音對講&#xff0c;使位于NAT后的兩個設備進行p2p的語音通訊&#xff0c;此處選用pjsip開源項目來實現。 未解決的問題&#xff1a;對稱型的NAT無法實現p2p打洞&#xff0c;pjsip采用turn服務進行轉發&#xff0c;不能稱之為純粹的p2p。 pjisp簡介 PJ…

VS2017 啟動調試報錯無法啟動程序 當前狀態中非法

昨天還可以使用&#xff0c;今天就莫名報了這個錯誤&#xff0c;百度了一下&#xff1a; 1. 第一種嘗試方法是右擊解決方案中的項目(圖標有帶球的)&#xff0c;打開屬性選擇“WEB”選項&#xff0c;修改特定頁為Home,結果還是報錯。 2.我又關閉Windows防火墻&#xff0c;依舊報…

ABAP WRITE

1、空行 WRITE /. 2、AS CHECKBOX DATA: check1 TYPE c LENGTH 1 VALUE X, check2 TYPE c LENGTH 1 VALUE . START-OF-SELECTION. WRITE: / check1 AS CHECKBOX, Checkbox 1, / check2 AS CHECKBOX, Checkbox 2. AT LINE-SELECTION. READ: LINE 1 FIELD VALUE check1, LINE 2 …

java 星期幾、得周一、得周日、上周、下周、相差、日期工具類

前些天發現了一個巨牛的人工智能學習網站&#xff0c;通俗易懂&#xff0c;風趣幽默&#xff0c;忍不住分享一下給大家。點擊跳轉到教程。 import org.apache.commons.lang3.StringUtils;import java.text.ParseException; import java.text.SimpleDateFormat; import java.ut…

蘋果前CEO斯卡利變身創業導師:欲尋下個喬布斯

喬布斯和約翰斯卡利 導語&#xff1a;國外媒體今天撰文稱&#xff0c;蘋果前CEO約翰斯卡利(John Sculley)雖然早已離開蘋果&#xff0c;但仍然活躍在科技行業。他現在將目光轉向了醫療科技領域&#xff0c;希望從中挖掘出下一個喬布斯。 以下為文章全文&#xff1a; 下一個喬布…