python:序列化与数据持久化

数据持久化的方式有:

1.普通文件无格式写入:将数据直接写入到文件中

2.普通序列化写入:json,pickle

3.DBM方式:shelve,dbm

相关内容:

  • json
  • pickle
  • shelve
  • dbm

首发时间:2018-02-23 20:52


json:

介绍:

按照指定格式【比如格式是字典,那么文件中就是字典】将数据明文写入到文件中,类型是bytes的,比如”中文“就会变成Unicode编码

用法:

  • 首先要导入模块import json
  • 序列化:
    • json.dump(序列化对象,文件对象)
    • json.dumps(序列化对象),返回值是一个字符串,需要手动将这个字符串写入到文件中

      print("------json序列化--------")
      import json
      import time
      info={
          ‘date‘:time.localtime(),
          ‘name‘:‘中文‘
      }
      f=open("test.txt","w")
      
      print("---------dump---------")
      # json.dump(info,f)
      # f.close()
      print("---------dumps,---------")
      f.write(json.dumps(info))
      f.close()
  • 反序列化:
    • json.load(文件对象)
    • json.loads(字符串)

      print("------反序列化--------")
      import json
      f=open("test.txt","r")
      
      print("-------load----------")
      # data=json.load(f)#1
      # print(data)
      print("-------loads----------")
      d2=json.loads(f.read())
      print(d2)
      f.close()

对于多次dump\dumps,如何load\loads取出来:

  • 需要在dump的时候,手动对数据进行划分
print("------json序列化--------")
import json
import time
info={
    ‘date‘:time.localtime(),
    ‘name‘:‘中文‘
   # ‘func‘:hello #注:json不可序列化函数
}
info2=[‘1‘,2,3,4]
f=open("test.txt","w")

print("---------dumps,---------")#用‘\n‘来区分两份数据
f.write(json.dumps(info)+"\n")
f.write(json.dumps(info2)+"\n")

f.close()
import json
with open("test.txt") as f:
    a=json.loads(f.readline())
    b=json.loads(f.readline())
    print(a,b)


pickle:

介绍:

  • 用于实现Python数据类型与Python特定二进制格式之间的转换
  • 参数protocol规定了序列化的协议版本,默认情况下使用pikkle序列化数据是bytes的,打开文件的方式必须为二进制格式

用法:

  • 首先导入模块import pickle
  • 序列化:
    • pickle.dump(序列化对象,文件对象)
    • pickle.dumps(序列化对象),返回值是一个字符串,需要手动将这个字符串写入到文件中

      import pickle
      
      info={
          ‘name‘:‘1‘,
          ‘age‘:2,
      }
      
      f=open("test2.txt","wb")
      pickle.dump(info,f)#序列化方法1
      # f.write(pickle.dumps(info))#序列化方法2
      f.close()
  • 反序列化:
    • pickle.load(文件对象)
    • pickle.loads(字符串)

      print("------反序列化--------")
      import pickle
      
      f=open("test2.txt","rb")
      data=pickle.loads(f.read())#反序列方法1
      print(data)
      
      # data=pickle.load(f)#反序列方法2
      # print(data)
      f.close()

shelve:

介绍:

  • 专门用于将Python数据类型的数据持久化到磁盘,操作类似于dict

用法:

  • 首先导入模块import
  • shelve打开一个文件: shelve文件对象 = shelve.open(文件名)
  • 写入:shelve文件对象[key]=value
  • 读出:shelve文件对象.get(key)
import shelve,time

d = shelve.open(‘shelve_test‘)  # 打开一个文件

print("----------写----------")

info ={"name":‘lilei‘,"sex":"man"}
name = ["autuman", "zhangsan", "lisi"]

d["teacher"] = name
d["student"] = info
d["date"] = time.ctime()

print("--------读------------")
print(d.get("teacher"))
print(d.get("student"))
print(d.get("date"))

d.close()

shelve可以很方便的序列化自定义的数据类型、函数:

import shelve,time

class A:
    def hello(self):
        print("123")
d = shelve.open(‘shelve_test‘)  # 打开一个文件

print("----------写----------")

d[‘class‘] =A

print("--------读------------")

a=d.get(‘class‘)()
a.hello()

d.close()

dbm:

介绍:

  • dbm与shelve非常类似,但dbm的键和值必须是字符串类型
  • dbm默认写入的数据是bytes的,将所有字符串都序列化成bytes的

用法:

  • 首先导入模块imort dbm【注意的是由很多个不同的dbm,可以选择来使用,这里使用默认】
  • 打开文件:dbm对象=dbm.open(文件名,打开模式)
  • 写入:dbm对象[key]=value
  • 读取: dbm对象[key]
import dbm

db=dbm.open("test.txt","c")

print("写".center(50,‘-‘))
db["name"]="1111111111112"
db["name2"]="2222222222222"

print("读".center(50,‘-‘))
print(db["name"])
print(db["name2"])

db.close()

原文地址:https://www.cnblogs.com/progor/p/8463610.html

时间: 2024-11-06 03:41:09

python:序列化与数据持久化的相关文章

python 基础之数据持久化存储

###数据持久化存储 - 说明:持久化存储方案,普通文件.数据库.序列化 - 示例: ```python import pickle class Person: def __init__(self, name, age): self.name = name self.age = age def __str__(self): return 'name:{} age:{}'.format(self.name, self.age) xiaoming = Person('xiaoming', 20) #

python 文件处理、数据持久化与正则

一.文件的处理 数据持久化最简单的类型就是普通文件,有时也叫做平面文件(flat file).文件是计算机中由OS(操作系统)管理的具有名字的存储区域,在linux系统上,文件被看作是字节序列. fileobj=open(filename, mode,buffering=-1,...)    打开文件 fileobj是open()函数返回的文件对象 filename需要打开的文件的字符串名 buffering:是否使用缓存,0表示输出无缓存,1表示使用缓存: 负数表示使用默认设置,正数表示使用近

python中后端数据序列化是不显示中文的解决方法

我们在前后端交互的时候,让序列化的数据更友好的显示,我们会用到 import json js = json.loads('{"name": "多多"}') print (json.dumps(js)) {"name": "\u54c8\u54c8"} #解决办法很简单: print (json.dumps(js, ensure_ascii=False)) {"name": "多多"} 原

6.python序列化功能之json&pickle

json模块是个非常重要的模块,可以实现任何语言之间跨平台的数据交换,还可以实现一些比较简单的数据类型的持久化.(这里的持久化就是说,把python内部一些比较简单的数据类型,比如说像字符串,列表,元组,字典之类的数据类型,转换为json字符串的标准格式,保存到硬盘中.) json模块常用函数: json.dumps():将python以字典为主的数据类型,包括(列表,元组,等)转换为json字符串. json.loads():将json字符串转换为python可识别的数据类型. json.du

[ python ] 序列化模块

什么叫序列化:    将原本的字典.列表等内容转换成一个字符串的过程就叫做序列化. 序列化的目的:    1. 以某种存储形式使自定义对象持久化    2. 将对象从一个地方传递到另一个地方    3. 使程序更具维护性 json 模块 json模块提供了四个功能:dumps.loads 和 dump.load import json dic = {'k1':1, 'k2': 2, 'k3': 3} # 序列化 str_dic = json.dumps(dic) # dumps 就是将字典类型转

python序列化与反序列

python序列化与反序列 在python中提供了两个模块可进行序列化.分别是pickle和json.他们两者的功能都差不多,dumps和dump都是进行序列化,而loads和load则是反序列化. 模块1:pickle pickle是python中独有的序列化模块.有个特别的名字,为泡菜.用于实现Python数据类型与Python特定二进制格式之间的转换. 1. .dumps()和.loads()为格式处理函数 import pickle #序列化 d = dict(name='Bob', a

Python序列化中json模块和pickle模块

1.什么是序列化? 将原本的字典.列表等内容转换成一个字符串的过程就叫做序列化. 比如,我们在python代码中计算的一个数据需要给另外一段程序使用,那我们怎么给? 现在我们能想到的方法就是存在文件里,然后另一个python程序再从文件里读出来. 但是我们都知道,对于文件来说是没有字典这个概念的,所以我们只能将数据转换成字典放到文件中. 你一定会问,将字典转换成一个字符串很简单,就是str(dic)就可以办到了,为什么我们还要学习序列化模块呢? 没错序列化的过程就是从dic 变成str(dic)

25.Python序列化模块,hashlib模块, configparser模块,logging模块,异常处理

一.序列化模块 什么叫序列化——将原本的字典.列表等内容转换成一个字符串的过程就叫做序列化. 比如,我们在python代码中计算的一个数据需要给另外一段程序使用,那我们怎么给?现在我们能想到的方法就是存在文件里,然后另一个python程序再从文件里读出来.但是我们都知道,对于文件来说是没有字典这个概念的,所以我们只能将数据转换成字典放到文件中.你一定会问,将字典转换成一个字符串很简单,就是str(dic)就可以办到了,为什么我们还要学习序列化模块呢?没错序列化的过程就是从dic 变成str(di

iOS中几种数据持久化方案

概论 所谓的持久化,就是将数据保存到硬盘中,使得在应用程序或机器重启后可以继续访问之前保存的数据.在iOS开发中,有很多数据持久化的方案,接下来我将尝试着介绍一下5种方案: plist文件(属性列表) preference(偏好设置) NSKeyedArchiver(归档) SQLite 3 CoreData 沙盒 在介绍各种存储方法之前,有必要说明以下沙盒机制.iOS程序默认情况下只能访问程序自己的目录,这个目录被称为"沙盒". 1.结构 既然沙盒就是一个文件夹,那就看看里面有什么吧