python的shelved持久化数据

清疚 2021-11-26 22:02 237阅读 0赞

> **文章最前**： 我是Octopus，这个名字来源于我的中文名--章鱼；我热爱编程、热爱算法、热爱开源。所有源码在我的个人[github][] ；这博客是记录我学习的点点滴滴，如果您对 Python、Java、AI、算法有兴趣，可以关注我的动态，一起学习，共同进步。

shelve是以键值对的形式，将内存中的数据通过文件持久化，值支持任何pickle支持的python数据格式，它会在目录下生成三个文件。

import shelve
    s = shelve.open('test.db')
    s['k1']={'int':10,'float':8.8,'string':'python'}
    s.close()    #关闭文件
    s = shelve.open('test.db')   #打开文件
    print(s['k1'])
    print(s['k1']['int'])
    s.close()

对于存储的key,value值，只能添加key,value，可修改整个value，不能单独修改列表或字典中的元素

s = shelve.open('test.db',flag='r')
    print(s['k1'])
    s['k2']=[1,2,3]    #添加数据
    print(s['k2'])
    s['k2'][0]=99   #修改存储的value的单个值时不生效也不报错
    print(s['k2'])
    s.close()
    
    s = shelve.open('test.db',flag='c')
    s.keys()
    s['k2']=(33,44)
    print(s['k2'])

写回(write-back)由于shelve在默认情况下是不会记录待持久化对象的任何修改的，所以我们在shelve.open()时候需要修改默认参数，否则对象的修改不会保存。

s = shelve.open('test.db',writeback=True)  #使用回写功能打开
    print(s['k1'])   #初始值
    print(s['k2'])
    s['k1']['float']='99.99'  #修改字典中的元素
    print(s['k1'])   #成功修改

writeback方式有优点也有缺点。优点是减少了我们出错的概率，并且让对象的持久化对用户更加的透明了；但这种方式并不是所有的情况下都需要，首先，使用writeback以后，shelf在open()的时候会增加额外的内存消耗，并且当DB在close()的时候会将缓存中的每一个对象都写入到DB，这也会带来额外的等待时间。因为shelve没有办法知道缓存中哪些对象修改了，哪些对象没有修改，因此所有的对象都会被写入。

print(s['k1'])
    s['k1']['list']=[1,2,3]
    s['k1']['tuple']=(4,5,6)
    s['k1']['dic']={'a':123,'b':456}
    print(s['k1'])

转自: [python3之序列化（pickle&json&shelve） - Py.qi - 博客园][python3_pickle_json_shelve_ - Py.qi -]

[github]: https://github.com/zhangyu345293721
[python3_pickle_json_shelve_ - Py.qi -]: https://www.cnblogs.com/zhangxinqi/p/8034380.html