Python实现JSON反序列化类对象

本文转自:https://juejin.im/post/5a7012b3f265da3e33049e6c

我们的网络协议一般是把数据转换成JSON之后再传输。之前在Java里面,实现序列化和反序列化,不管是jackson,还是fastjson都非常的简单。现在有项目需要用Python来开发,很自然的希望这样的便利也能在Python中体现。

但是在网上看了一些教程,讲反序列化的时候,基本都是转换为dict或者array。这种编程方式我从情感上是无法接受的。难道是这些JSON库都不支持反序列化为类对象?我马上打消了这个念头,Python这样强大的脚本语言,不可能没有完善的JSON库。

于是我就研究了一下原生的json,以及第三方的demjsonsimplejson

一、原生json

我仔细研究了原生jsonloads方法的定义

def loads(s, encoding=None, cls=None, object_hook=None, parse_float=None, parse_int=None, parse_constant=None, object_pairs_hook=None, **kw)
复制代码

这里面的object_hookobject_pairs_hook参数引起了我的注意,我重点说一下object_hook

官方文档的说明如下:

object_hook is an optional function that will be called with the result of any object literal decoded (a dict). The return value of object_hook will be used instead of the dict. This feature can be used to implement custom decoders (e.g. JSON-RPC class hinting).

这个object_hook根据文档的解释就是一个自定义解码函数,入参数标准反序列化后的dict,我们可以根据自己的规则转换输出为想要的格式。

我又去搜了一下object_hook,大家对于这个东西的处理方式基本就是用一个静态方法把dict转换成对象。

我们的数据结构是这样的

{"status":1,"info":"发布成功","data":{"id":"52","feed_id":"70"}}
复制代码

于是我就写了这样的代码:

class Response:

    def __init__(self, status, info, data) -> None:
        super().__init__()
        self.status = status
        self.info = info
        self.data = data

    @staticmethod
    def object_hook(d):
        return Response(d[‘status‘], d[‘info‘], d[‘data‘])
 ...
resp = json.loads(body, object_hook=Response.object_hook)
复制代码

一开始呢,确实没有问题,虽然用起来没有java的json库辣么方便,但总归实现了需求。

好景不长,我测试的第一个接口返回的数据中,data是字段一个字符串,反序列化正常。可是后来当接口返回的结构中data字段是一个dict结构的时候,object_hook的入参居然变成了data字段转换之后的dict({"id":"52","feed_id":"70"}),而不是完整的数据。

这些懵逼了,上网搜索了一圈没有结论。好吧,我最后又老老实实回到官方文档,read the fucking official document

不看不知道,一看吓一跳,官方文档用了一种巧妙的方式实现了上面的需求。

>>> class JSONObject:
...     def __init__(self, d):
...         self.__dict__ = d
...
>>>
>>> data = json.loads(s, object_hook=JSONObject)
>>> data.name
‘ACME‘
>>> data.shares
50
>>> data.price
490.1
>>>
复制代码

我服了,把json解析之后的dict直接赋值给对象的属性dict,然后就可以随心所欲的使用属性了,真心方便,动态语言就是好。

以上是官方的json库实现方案,那另外两个知名的第三方库呢?

二、demjson

demjson也支持hook。有两种配置的方式:decode函数配置和set_hook函数配置

1. decode

def decode( txt, encoding=None, **kwargs )
复制代码

decode函数可以指定很多参数,其中就包括hook函数。hook函数的指定是使用键值对的方式,键是hook函数的名称,值是hook函数。

demjson是通过名字来管理hook函数的,所以hookname不是随便指定的,必须是内置的几种hook函数的名称。

  • decode_number
  • decode_float
  • decode_object
  • decode_array
  • decode_string
  • encode_value
  • encode_dict
  • encode_dict_key
  • encode_sequence
  • encode_bytes
  • encode_default
demjson.decode(body, encode=‘utf-8‘,decode_obbject=Reponse.object_hook)
复制代码

结果并没有让我很开森,依然是无法处理嵌套结构。 日志中显示如下内容:

2018-01-30 16:01:17,137 poster.py post_all 73 INFO    : {"status":1,"info":"\u53d1\u5e03\u6210\u529f","data":{"id":"54","feed_id":"72"}}
2018-01-30 16:01:17,138 response.py object_hook 13 INFO    : {‘id‘: ‘54‘, ‘feed_id‘: ‘72‘}
2018-01-30 16:01:17,138 response.py object_hook 13 INFO    : {‘status‘: 1, ‘info‘: ‘发布成功‘, ‘data‘: demjson.undefined}
复制代码

很奇怪的是object_hook 函数被调用了两次,第一次是data字段的内容,第二是全部的内容,但是data字段没有解析出来。 非常奇怪,百思不得其解!!!

2. set_hook

set_hook函数跟上面的decode函数不一样,它是JSON类的成员函数,而decode函数是个静态函数。

def set_hook(self, hookname, function)
复制代码

吸取之前的教训,这次我仔细阅读了demjson的文档,还真发现点东西。

Netsted values. When decoding JSON that has nested objects or arrays, the decoding hooks will be called once for every corresponding value, even if nested. Generally the decoding hooks will be called from the inner-most value outward, and then left to right.

这里重点说到嵌套的问题,出现嵌套的时候,每个对应的类型都会调用hook函数一次,而且是从最内层,从左往右。好吧,之前出现的问题全部明白了,原来都是这个规则惹的祸,但是为什么这样设计我暂时还是不明白。

set_hook的使用方式

    j = demjson.JSON()
    j.set_hook( ‘decode_array‘, my_sort_array )
    j.decode(body, encode=‘utf-8‘)
复制代码

三、simplejson

前面说了那么多,simplejson的方式就没什么可说的,跟官方的jsonhook方式一致。

总结

虽然我的需求是满足了,但是还是有一个大大的问号留在我心中,为什么是这样设计,网上没有找到合适的答案,剩下的需要研究源代码分析了。

作者:挨踢的懒猫
链接:https://juejin.im/post/5a7012b3f265da3e33049e6c
来源:掘金
著作权归作者所有。商业转载请联系作者获得授权,非商业转载请注明出处。

原文地址:https://www.cnblogs.com/Netsharp/p/12336998.html

时间: 2024-10-12 17:19:51

Python实现JSON反序列化类对象的相关文章

Json与类对象转换

Json在js,jquery中可以直接使用,比如下串: { "from":"en" ,"to":"zh" ,"trans_result": [ {"src":"today","dst":"\u4eca\u5929"} ] } 可以直接使用data.from即可获取到"en". 但是在c#中不可以.要获取值,有

com.alibaba.fastjson.JSON对类对象的序列化与反序列化

1. 目标 把类的对象存储到字符串可存储 2. 类定义 public interface JsonInterface { } mport com.alibaba.fastjson.JSON; import lombok.Getter; import lombok.Setter; @Setter @Getter public class JsonVo implements JsonInterface { private String id; private String name; public

Python 操作json

Json语法规则: 数据在名称/值对中 数据由逗号分隔 花括号保存对象 方括号保存数组 Json字符串本质上是一个字符串,用单引号表示 Json数据的书写格式 名称--值对,包括名称字段(在双引号中),后面跟一个冒号,然后是值: "name": "zhangsan" 等价于name = "zhangsan" Json值 值可以是 数字(整数或浮点数) 字符串(双引号括起来) 逻辑值(true或false) 数组(在方括号中) 对象(在花括号中)

python 将类对象转换成json

如果将字典转换成json,想必都很熟悉了,如果在进阶点,将class类转换成json对象该如何操作了? 1,先定义一个类 #定义一个Student类 class Student(object): def __init__(self,name,age,score): self.name = name self.age = age self.score = score 2,在实例化Student类,传入3个参数 #实例化这个对象 s = Student('hello',20,80) 3,利用json

Python序列化与反序列化-json与pickle

Python序列化与反序列化-json与pickle 作者:尹正杰 版权声明:原创作品,谢绝转载!否则将追究法律责任. 一.json的序列化方式与反序列化方式 1>.json序列化 1 #!/usr/bin/env python 2 #_*_coding:utf-8_*_ 3 #@author :yinzhengjie 4 #blog:http://www.cnblogs.com/yinzhengjie/tag/python%E8%87%AA%E5%8A%A8%E5%8C%96%E8%BF%90

python序列化与反序列化——json与pickle

一.定义 序列化是指将对象从内存中取出来写入存储区,如txt文件中,反序列则相反. 二. 应用场景 跨平台数据传输: 保留上一次运行程序时对对象的修改 三. 模块和函数 1. json dumps().dump()(序列化) loads().load() (反序列化) 2. pickle dumps().dump()(序列化) loads().load ()(反序列化) 四.  应用案例 1. pickle 1 import pickle 2 3 info = {"lyrics": &

JavaScriptSerializer类 对象序列化为JSON,JSON反序列化为对象 。

JavaScriptSerializer 类由异步通信层内部使用,用于序列化和反序列化在浏览器和 Web 服务器之间传递的数据.说白了就是能够直接将一个C#对象传送到前台页面成为javascript对象.要添加System.Web.Extensions.dll的引用.该类位于System.Web.Script.Serialization命名空间下. 一.属性 MaxJsonLength 获取或设置 JavaScriptSerializer 类接受的 JSON 字符串的最大长度. Recursio

JavaScriptSerializer类 对象序列化为JSON,JSON反序列化为对象

JavaScriptSerializer 类由异步通信层内部使用,用于序列化和反序列化在浏览器和 Web 服务器之间传递的数据.说白了就是能够直接将一个C#对象传送到前台页面成为javascript对象.要添加System.Web.Extensions.dll的引用.该类位于System.Web.Script.Serialization命名空间下. 一.属性 MaxJsonLength 获取或设置 JavaScriptSerializer 类接受的 JSON 字符串的最大长度. Recursio

总结的一些json格式和对象/String/Map/List等的互转工具类

原文:总结的一些json格式和对象/String/Map/List等的互转工具类 源代码下载地址:http://www.zuidaima.com/share/1550463691508736.htm 总结的一些json格式和对象/String/Map/List等的互转工具类,有需要的可以看看,需要引入jackson-core-asl-1.7.1.jar.jackson-jaxrs-1.7.1.jar.jackson-mapper-asl-1.7.1.jar这三个jar包 package com.