Python標準庫系列之Redis模組

發表於2017-01-26

What is redis?

Redis is an open source (BSD licensed), in-memory data structure store, used as database, cache and message broker. It supports data structures such as strings, hashes, lists, sets, sorted sets with range queries, bitmaps, hyperloglogs and geospatial indexes with radius queries. Redis has built-in replication, Lua scripting, LRU eviction, transactions and different levels of on-disk persistence, and provides high availability via Redis Sentinel and automatic partitioning with Redis Cluster.

Redis官網:http://redis.io/

以上摘自官網介紹

安裝Redis

安裝

模組GitHub地址:https://github.com/WoLpH/redis-py

配置繫結的IP

啟動並設定開機自啟動

檢查

檢視埠

資料寫入測試

安裝redis-py

安裝redis-py

或原始碼安裝

檢查安裝是否成功

入門及使用

使用連線池連線到Redis

Behind the scenes, redis-py uses a connection pool to manage connections to a Redis server. By default, each Redis instance you create will in turn create its own connection pool. You can override this behavior and use an existing connection pool by passing an already created connection pool instance to the connection_pool argument of the Redis class. You may choose to do this in order to implement client side sharding or have finer grain control of how connections are managed.

使用套接字連線

API

redis-py提供的API用來操作redis

String API

set(name, value, ex=None, px=None, nx=False, xx=False)

引數 描述
ex 過期時間(秒)
px 過期時間(毫秒)
nx 如果設定為True,則只有name不存在時,當前set操作才執行
xx 如果設定為True,則只有name存在時,崗前set操作才執行

setex(name, value, time)

設定過期時間/秒

psetex(name, time_ms, value)

設定過期時間/毫秒

setnx(name, value)

設定值,只有key不存在時,執行設定操作

mset(*args, **kwargs)

同時設定多個key/value

get(name)

獲取單個值

mget(keys, *args)

獲取多個值

getset(name, value)

設定新值並獲取原來的值

getrange(key, start, end)

通過索引的方式來獲取value的值

setrange(name, offset, value)

根據索引修改value

setbit(name, offset, value)

getbit(name, offset)

獲取value對應某一個索引位置對應的值0/1

bitcount(key, start=None, end=None)

獲取key對應二進位制中表示1的個數

bitop(operation, dest, *keys)

將多個值進行值運算,得出的結果儲存到一個新值當中

operation支援AND(並)、OR(或)、NOT(非)、XOR(異或)

strlen(name)

獲取value的長度

incr(name, amount=1)

對name的value進行自增,如果name不存在則建立,否則自增

incrbyfloat(name, amount=1.0)

同上,支援浮點數自增

decr(name, amount=1)

自減,同自增一樣,如果進行自減的value不是整數就報錯

append(key, value)

在value後面追加內容

Hash API

hset(name, key, value)

設定name的鍵值對,有則修改,沒有則建立

hmset(name, mapping)

同時設定多個name的key/value

hget(name, key)

獲取name中key的值

hmget(name, keys, *args)

同時獲取多個

hgetall(name)

獲取name對應的所有key/value

hlen(name)

獲取name對應鍵值對的個數

hkeys(name)

獲取name中所有的key

hvals(name)

獲取name中所有的value

hexists(name, key)

檢查當前name中是否有傳入的key

hdel(self, name, *keys)

刪除name中對應的key

hincrby(name, key, amount=1)

name中key對應的value進行自增,如果不存在則建立

hincrbyfloat(name, key, amount=1.0)

value自增,支援浮點數,同上

hscan(name, cursor=0, match=None, count=None)

增量式迭代獲取,hscan可以實現分片的獲取資料,並非一次性將資料全部獲取完,從而放置記憶體被撐爆

引數 描述
name redis的name
cursor 遊標(基於遊標分批取獲取資料)
match 匹配指定key,預設None 表示所有的key
count 每次分片最少獲取個數,預設None表示採用Redis的預設分片個數

hscan_iter(name, match=None, count=None)

利用yield封裝hscan建立生成器,實現分批去redis中獲取資料

引數 描述
match 匹配指定key,預設None 表示所有的key
count 每次分片最少獲取個數,預設None表示採用Redis的預設分片個數

如:

expire(name, time)

設定過期時間

ListAPI

lpush(name, *values)

在最左邊新增值

rpush(name, *values)

在最右邊新增值

lpushx(name, value)

只有name已經存在時,值新增到列表的最左邊

rpushx(name, value)

只有name已經存在時,值新增到列表的最右邊

llen(name)

獲取name元素的個數

linsert(name, where, refvalue, value)

在name的某一個值前面或者後面插入一個新值

lset(name, index, value)

對name中index索引位置的值進行重新賦值

lrem(name, value, num=0)

刪除指定value後面或者前面的值

  1. num=2,從前到後,刪除2個;
  2. num=-2,從後向前,刪除2個

lpop(name)

刪除name中左側第一個元素

rpop(name)

刪除name中右側第一個元素

lindex(name, index)

獲取name中對應索引的值

lrange(name, start, end)

使用切片獲取資料

ltrim(name, start, end)

在name對應的列表中移除沒有在start-end索引之間的值

rpoplpush(src, dst)

從src列表中取出最右邊的元素,同時將其新增至dst列表的最左邊

blpop(keys, timeout=0)
brpop(keys, timeout=0)

brpoplpush(src, dst, timeout=0)

從src列表的右側移除一個元素並將其新增到dst列表的左側

timeout,當src對應的列表中沒有資料時,阻塞等待其有資料的超時時間(秒),0 表示永遠阻塞

自定義增量迭代

由於redis類庫中沒有提供對列表元素的增量迭代,如果想要迴圈name對應的列表的所有元素,那麼就需要:

  1. 獲取name對應的所有列表
  2. 迴圈列表

但是,如果列表非常大,那麼就有可能在第一步時就將程式的內容撐爆,所有有必要自定義一個增量迭代的功能:

使用

SET API

sadd(name, *values)

為name新增值,如果存在則不新增

scard(name)

返回name的元素數量

sdiff(keys, *args)

在keys集合中不在其他集合中的資料

sdiffstore(dest, keys, *args)

在keys集合中不在其他集合中的資料儲存到dest集合中

sinter(keys, *args)

獲取keys集合中與其他集合中的並集

sinterstore(dest, keys, *args)

獲取keys集合中與其他集合中的並集資料並儲存到dest集合中

sismember(name, value)

獲取value是否是name集合中的成員

smembers(name)

獲取name集合中所有的成員

smove(src, dst, value)

將src中的value移動到dst中

spop(name)

刪除並返回name中的隨機成員

srandmember(name, number=None)

隨機獲取name集合中的number個成員,預設number=1

srem(name, *values)

刪除name集合中的values資料

sunion(keys, *args)

獲取keys集合與其他集合的並集

sunionstore(dest, keys, *args)

獲取keys集合與其他集合的並集並儲存到dest中

Ordered set API

zadd(name, *args, **kwargs)

zcard(name)

返回有序集合name元素的數量

zcount(name, min, max)

返回在name中值在min與max之間的值個數

zincrby(name, value, amount=1)

name中讓value的值加上amount

zinterstore(dest, keys, aggregate=None)
zlexcount(name, min, max)

zrange(name, start, end, desc=False, withscores=False, score_cast_func=float)

引數 描述
name redis的name
start 有序集合索引起始位置(非分數)
end 有序集合索引結束位置(非分數)
desc 排序規則,預設按照分數從小到大排序
withscores 是否獲取元素的分數,預設只獲取元素的值
score_cast_func 對分數進行資料轉換的函式

zrangebylex(name, min, max, start=None, num=None)

當有序集合的所有成員都具有相同的分值時,有序集合的元素會根據成員的 值 (lexicographical ordering)來進行排序,而這個命令則可以返回給定的有序集合鍵 key 中, 元素的值介於 min 和 max 之間的成員

對集合中的每個成員進行逐個位元組的對比(byte-by-byte compare), 並按照從低到高的順序, 返回排序後的集合成員。 如果兩個字串有一部分內容是相同的話, 那麼命令會認為較長的字串比較短的字串要大

引數 描述
name redis的name
min 左區間(值) + 表示正無限; – 表示負無限; ( 表示開區間; [ 則表示閉區間
min 右區間(值)
start 對結果進行分片處理,索引位置
num 對結果進行分片處理,索引後面的num個元素

如:

更多:

zrevrangebylex(name, max, min, start=None, num=None)

zrangebyscore(name, min, max, start=None, num=None, withscores=False, score_cast_func=float)**

zrank(name, value)

返回基於0的值,指示在排序集名稱的值排名

zrevrank(name, value),從大到小排序

zrem(name, *values)

刪除name中對應的values

zremrangebyrank(name, min, max)

根據排行範圍進行刪除

zremrangebyscore(name, min, max)

根據分數範圍進行刪除

zscore(name, value)

返回指定value的值是多少

zunionstore(dest, keys, aggregate=None)

Global API

delete(*names)

在redis中刪除names

exists(name)

檢測name是否存在

keys(pattern=’*’)

rename(src, dst)

把src重新命名成dst

move(name, db)

將redis的某個值移動到指定的db下

randomkey()

隨機獲取一個redis的name,不進行刪除

type(name)

檢視name的型別

管道

redis-py預設在執行每次請求都會建立(連線池申請連線)和斷開(歸還連線池)一次連線操作,如果想要在一次請求中指定多個命令,則可以使用pipline實現一次請求指定多個命令,並且預設情況下一次pipline 是原子性操作(MySQL中的事務)。

釋出訂閱

例項

讓redis快取tornado頁面

資料快取5秒,如圖所示

Python標準庫系列之Redis模組

基於Redis的Session儲存

app.py

template\index.html

RedisToSession.py

演示如圖:

Python標準庫系列之Redis模組

相關文章