วิธีจัดเก็บและเรียกค้นพจนานุกรมด้วย redis

# I have the dictionary my_dict
my_dict = {
    'var1' : 5
    'var2' : 9
}
r = redis.StrictRedis()

ฉันจะจัดเก็บ my_dict และเรียกคืนด้วย redis ได้อย่างไร ตัวอย่างเช่นรหัสต่อไปนี้ไม่ทำงาน

#Code that doesn't work
r.set('this_dict', my_dict)  # to store my_dict in this_dict
r.get('this_dict')  # to retrieve my_dict

คุณสามารถทำได้โดยhmset(สามารถตั้งค่าได้หลายปุ่มโดยใช้hmset)

hmset("RedisKey", dictionaryToSet)

import redis
conn = redis.Redis('localhost')

user = {"Name":"Pradeep", "Company":"SCTL", "Address":"Mumbai", "Location":"RCP"}

conn.hmset("pythonDict", user)

conn.hgetall("pythonDict")

{'Company': 'SCTL', 'Address': 'Mumbai', 'Location': 'RCP', 'Name': 'Pradeep'}

คุณสามารถดองคำสั่งของคุณและบันทึกเป็นสตริง

import pickle
import redis

r = redis.StrictRedis('localhost')
mydict = {1:2,2:3,3:4}
p_mydict = pickle.dumps(mydict)
r.set('mydict',p_mydict)

read_dict = r.get('mydict')
yourdict = pickle.loads(read_dict)

อีกวิธีหนึ่ง: คุณสามารถใช้RedisWorksไลบรารี

pip install redisworks

>>> from redisworks import Root
>>> root = Root()
>>> root.something = {1:"a", "b": {2: 2}}  # saves it as Hash type in Redis
...
>>> print(root.something)  # loads it from Redis
{'b': {2: 2}, 1: 'a'}
>>> root.something['b'][2]
2

มันแปลงประเภท python เป็นประเภท Redis และในทางกลับกัน

>>> root.sides = [10, [1, 2]]  # saves it as list in Redis.
>>> print(root.sides)  # loads it from Redis
[10, [1, 2]]
>>> type(root.sides[1])
<class 'list'>

Disclaimer: ฉันเขียนห้องสมุด นี่คือรหัส: https://github.com/seperman/redisworks

ตามคำตอบพื้นฐานที่คนอื่นให้ไว้แล้วฉันจึงอยากจะเพิ่มคำตอบนั้น

ต่อไปนี้เป็นคำสั่งในREDISการดำเนินการพื้นฐานกับHashMap/Dictionary/Mappingค่าประเภท

1. HGET => ส่งคืนค่าสำหรับคีย์เดียวที่ส่งผ่าน
2. HSET => ตั้งค่า / อัปเดตค่าสำหรับคีย์เดียว
3. HMGET => ส่งคืนค่าสำหรับคีย์เดียว / หลายคีย์ที่ผ่าน
4. HMSET => ตั้งค่า / อัปเดตค่าสำหรับหลายคีย์
5. HGETALL => ส่งคืนคู่ (คีย์ค่า) ทั้งหมดในการแมป

ต่อไปนี้เป็นวิธีการตามลำดับในredis-pyห้องสมุด: -

1. HGET => hget
2. HSET => hset
3. HMGET => hmget
4. HMSET => hmset
5. HGETALL => hgetall

เมธอด setter ทั้งหมดข้างต้นจะสร้างการแมปหากไม่มีอยู่ เมธอด getter ทั้งหมดข้างต้นไม่เพิ่มข้อผิดพลาด / ข้อยกเว้นหากไม่มีการแมป / คีย์ในการแมป

Example:
=======
In [98]: import redis
In [99]: conn = redis.Redis('localhost')

In [100]: user = {"Name":"Pradeep", "Company":"SCTL", "Address":"Mumbai", "Location":"RCP"}

In [101]: con.hmset("pythonDict", {"Location": "Ahmedabad"})
Out[101]: True

In [102]: con.hgetall("pythonDict")
Out[102]:
{b'Address': b'Mumbai',
 b'Company': b'SCTL',
 b'Last Name': b'Rajpurohit',
 b'Location': b'Ahmedabad',
 b'Name': b'Mangu Singh'}

In [103]: con.hmset("pythonDict", {"Location": "Ahmedabad", "Company": ["A/C Pri
     ...: sm", "ECW", "Musikaar"]})
Out[103]: True

In [104]: con.hgetall("pythonDict")
Out[104]:
{b'Address': b'Mumbai',
 b'Company': b"['A/C Prism', 'ECW', 'Musikaar']",
 b'Last Name': b'Rajpurohit',
 b'Location': b'Ahmedabad',
 b'Name': b'Mangu Singh'}

In [105]: con.hget("pythonDict", "Name")
Out[105]: b'Mangu Singh'

In [106]: con.hmget("pythonDict", "Name", "Location")
Out[106]: [b'Mangu Singh', b'Ahmedabad']

ฉันหวังว่ามันจะทำให้ทุกอย่างชัดเจนขึ้น

หากคุณต้องการจัดเก็บ python dict ใน redis ควรจัดเก็บเป็นสตริง json

import redis

r = redis.StrictRedis(host='localhost', port=6379, db=0)
mydict = { 'var1' : 5, 'var2' : 9, 'var3': [1, 5, 9] }
rval = json.dumps(mydict)
r.set('key1', rval)

ในขณะที่ดึง de-serialize โดยใช้ json.loads

data = r.get('key1')
result = json.loads(data)
arr = result['var3']

ประเภท (เช่นไบต์) ที่ไม่ต่อเนื่องโดยฟังก์ชัน json ล่ะ?

คุณสามารถเขียนฟังก์ชันตัวเข้ารหัส / ตัวถอดรหัสสำหรับประเภทที่ไม่สามารถต่ออนุกรมโดยฟังก์ชัน json ได้ เช่น. การเขียนฟังก์ชันตัวเข้ารหัส / ถอดรหัส base64 / ascii สำหรับไบต์อาร์เรย์

อาจพิจารณาใช้MessagePackซึ่งรับรองโดย redis

import msgpack

data = {
    'one': 'one',
    'two': 2,
    'three': [1, 2, 3]
}

await redis.set('my-key', msgpack.packb(data))
val = await redis.get('my-key')
print(msgpack.unpackb(val))

# {'one': 'one', 'two': 2, 'three': [1, 2, 3]}

ใช้msgpack-pythonและaioredis

อีกวิธีหนึ่งที่คุณสามารถเข้าใกล้ประเด็นนี้:

import redis
conn = redis.Redis('localhost')

v={'class':'user','grants': 0, 'nome': 'Roberto', 'cognome': 'Brunialti'}

y=str(v)
print(y['nome']) #<=== this return an error as y is actually a string
conn.set('test',y)

z=eval(conn.get('test'))
print(z['nome']) #<=== this really works!

ฉันไม่ได้ทดสอบประสิทธิภาพ / ความเร็ว

คำสั่ง redis SET เก็บสตริงไม่ใช่ข้อมูลโดยพลการ คุณสามารถลองใช้คำสั่ง redis HSET เพื่อจัดเก็บ dict เป็นแฮช redis ด้วยสิ่งที่ต้องการ

for k,v in my_dict.iteritems():
    r.hset('my_dict', k, v)

แต่ประเภทข้อมูล redis และ python datatypes ไม่ค่อยเรียงกัน Python dicts สามารถซ้อนกันได้โดยพลการ แต่แฮช redis จะกำหนดให้ค่าของคุณเป็นสตริง อีกวิธีหนึ่งที่คุณสามารถทำได้คือการแปลงข้อมูล python ของคุณเป็นสตริงและจัดเก็บข้อมูลนั้นไว้ใน redis เช่น

r.set('this_dict', str(my_dict))

จากนั้นเมื่อคุณดึงสตริงออกมาคุณจะต้องแยกวิเคราะห์เพื่อสร้างวัตถุ python ขึ้นมาใหม่

HMSET เลิกใช้งานแล้ว ตอนนี้คุณสามารถใช้ HSET กับพจนานุกรมได้ดังนี้:

import redis
r = redis.Redis('localhost')

key = "hashexample" 
queue_entry = { 
    "version":"1.2.3", 
    "tag":"main", 
    "status":"CREATED",  
    "timeout":"30"
    }
r.hset(key,None,None,queue_entry)

ลองrejson-pyซึ่งค่อนข้างใหม่ตั้งแต่ปี 2017 ดูบทนำนี้

from rejson import Client, Path

rj = Client(host='localhost', port=6379)

# Set the key `obj` to some object
obj = {
    'answer': 42,
    'arr': [None, True, 3.14],
    'truth': {
        'coord': 'out there'
    }
}
rj.jsonset('obj', Path.rootPath(), obj)

# Get something
print 'Is there anybody... {}?'.format(
    rj.jsonget('obj', Path('.truth.coord'))
)

# Delete something (or perhaps nothing), append something and pop it
rj.jsondel('obj', Path('.arr[0]'))
rj.jsonarrappend('obj', Path('.arr'), 'something')
print '{} popped!'.format(rj.jsonarrpop('obj', Path('.arr')))

# Update something else
rj.jsonset('obj', Path('.answer'), 2.17)

หากคุณไม่ทราบวิธีจัดระเบียบข้อมูลใน Redis อย่างชัดเจนฉันได้ทำการทดสอบประสิทธิภาพบางอย่างรวมถึงการแยกวิเคราะห์ผลลัพธ์ คำสั่งที่ฉันใช้ ( d ) มี 437.084 คีย์ (รูปแบบ md5) และค่าของแบบฟอร์มนี้:

{"path": "G:\tests\2687.3575.json",
 "info": {"f": "foo", "b": "bar"},
 "score": 2.5}

การทดสอบครั้งแรก (การแทรกข้อมูลลงในการแมปคีย์ - ค่า redis):

conn.hmset('my_dict', d)  # 437.084 keys added in 8.98s

conn.info()['used_memory_human']  # 166.94 Mb

for key in d:
    json.loads(conn.hget('my_dict', key).decode('utf-8').replace("'", '"'))
    #  41.1 s

import ast
for key in d:
    ast.literal_eval(conn.hget('my_dict', key).decode('utf-8'))
    #  1min 3s

conn.delete('my_dict')  # 526 ms

การทดสอบครั้งที่สอง (การแทรกข้อมูลลงในปุ่ม Redis โดยตรง):

for key in d:
    conn.hmset(key, d[key])  # 437.084 keys added in 1min 20s

conn.info()['used_memory_human']  # 326.22 Mb

for key in d:
    json.loads(conn.hgetall(key)[b'info'].decode('utf-8').replace("'", '"'))
    #  1min 11s

for key in d:
    conn.delete(key)
    #  37.3s

ดังที่คุณเห็นในการทดสอบครั้งที่สองต้องแยกวิเคราะห์เฉพาะค่า "ข้อมูล" เนื่องจาก hgetall (คีย์) ส่งคืนคำสั่งอยู่แล้ว แต่ไม่ใช่ค่าที่ซ้อนกัน

และแน่นอนว่าตัวอย่างที่ดีที่สุดของการใช้ Redis เป็นคำสั่งของ python คือการทดสอบครั้งแรก