python—在redis中存储gzip数据

hlswsv35  于 2021-06-10  发布在  Redis
关注(0)|答案(1)|浏览(650)

我有一个巨大的python字典,我想保存到redis缓存,然后让api处理程序直接从缓存返回这个字典
我正在使用 gzip 在存储到缓存之前先压缩字符串化的dict

transformed_object = {...big dictionary}

    byte_object = BytesIO()

    data = json.dumps(transformed_object)
    with gzip.GzipFile(fileobj=byte_object, mode="w") as f:
        f.write(data.encode())

    final_data = byte_object.getvalue()

我把它写到redis缓存里

context.redis.set(COMPLETE_GZIPPED_CACHE, final_data)

我有一个api处理程序,我想在其中返回gzip数据

cache_list = redis.get(COMPLETE_GZIPPED_CACHE)
    self.finish(
        {
            "status": True,
            "cache_list": cache_list,
            "updated_at": datetime.datetime.now(),
        }
    )

问题是我得到了下面的错误

TypeError: Object of type 'bytes' is not JSON serializable

在返回前端之前,我是否需要先将字节解码回字符串?理想情况下,我希望前端处理解码
有没有更好的办法?

h79rfbju

h79rfbju1#

从其他帖子中找到了答案-编写了这样的函数并选择使用 zlib ```
def convert_to_gzip_format(dict):
stringified_object = json.dumps(dict).encode("utf-8")
compressed_file = zlib.compress(stringified_object)

base64_string = base64.b64encode(compressed_file).decode("ascii")
return base64_string
这会将其作为ascii字符串保存到redis。然后我使用 `pako.js` 在前端将上述内容解码为可读字符串。

相关问题