关于pgsql 的json 和jsonb 的数据查询操作笔记整理

关于pgsql 的json 和jsonb 的数据处理笔记

1. json 和jsonb 区别
两者从用户操作的角度来说没有区别,区别主要是存储和读取的系统处理(预处理)和耗时方面有区别。json写入快,读取慢,jsonb写入慢,读取快。

2. 常用的操作符

操作符:

-> // 右边传入整数(针对纯数组),获取数组的第n个元素,n从0开始算,返回值为json

示例: select ‘[{"a":"foo"},{"b":"bar"},{"c":"baz"}]‘::json->2 // 输出 {"c":"baz"}

-> // 右边传入键值(针对关联数组),获取数组的第n个元素,n从0开始算,返回值为json

示例: select ‘{"a": {"b":"foo"}, "c":{"a": "aaa"}}‘::json->‘a‘ // 输出 {"b":"foo"}

->> // 右边传入整数(针对纯数组),获取数组的第n个元素,n从0开始算,返回值为文本

示例: select ‘[{"a":"foo"},{"b":"bar"},{"c":"baz"}]‘::json->>2 // 输出 {"c":"baz"}

->> // 右边传入键值(针对关联数组),获取数组的第n个元素,n从0开始算,返回值为文本

示例: select ‘{"a": {"b":"foo"}, "c":{"a": "aaa"}}‘::json->>‘a‘ // 输出 {"b":"foo"}

#> // 获取json子对象,传入数组,返回json

示例: select ‘{"a": {"b":{"c": "foo"}}}‘::json#> ‘{a,b}‘ // 输出 {"c": "foo"}

#>> // 获取json子对象并转换为文本,传入数组,返回文本

示例: select ‘{"a": {"b":{"c": "foo"}}}‘::json#>> ‘{a,b}‘ // 输出 {"c": "foo"}

3. 操作函数
目前pgsql版本提供了两套函数分别处理,可以通用,名称也差不多,比如 json_each 和 jsonb_each , json_array_elements 和 jsonb_array_elements 。

json相关的处理函数比较多,常用的有如下三个,这三个基本够用了

json_object_keys  // 返回json的键(多层只返回第一层),该函数不能用于纯数组.

json_array_elements  // 提取转换纯数组元素

json_extract_path   // 返回JSON值所指向的某个键元素(相当于 #> 操作符),该函数不能直接操作纯数组。

需要注意的是如果你创建字段用的是json就用json相关函数,如果创建字段用的是jsonb就用jsonb相关函数。

json_object_keys 函数示例:

select json_object_keys (‘
{
"goods":
[
{"id": "676a13d3-0225-4431-b858-678c3cfeab74", "weight": "1", "quantity": "9999999"},
{"id": "111a13d3-0225-4431-b858-678c3cfeab75", "weight": "2", "quantity": "33"}
],
"quantity": "10"
}
‘)

输出:

json_object_keys 函数示例:

select json_object_keys (‘

{"id": "676a13d3-0225-4431-b858-678c3cfeab74", "weight": "1", "quantity": "9999999"},
{"id": "111a13d3-0225-4431-b858-678c3cfeab75", "weight": "2", "quantity": "33"}
], 
‘)

输出:

ERROR:  cannot call json_object_keys on an array     // 不能用于数组

json_array_elements  函数 示例:

select json_array_elements (‘
[
{"id": "676a13d3-0225-4431-b858-678c3cfeab74", "weight": "1", "quantity": "9999999"},
{"id": "111a13d3-0225-4431-b858-678c3cfeab75", "weight": "2", "quantity": "33"},
{"id": "111a13d3-0225-4431-b858-678c3cfea999", "weight": "3", "quantity": "11"}
]
‘)

我们看到json数据被分离成三条记录,这时我们就可以对其进行查询操作,

比如查询是否包含了weight=3的数据。

select * from json_array_elements (‘
[
{"id": "676a13d3-0225-4431-b858-678c3cfeab74", "weight": "1", "quantity": "9999999"},
{"id": "111a13d3-0225-4431-b858-678c3cfeab75", "weight": "2", "quantity": "33"},
{"id": "111a13d3-0225-4431-b858-678c3cfea999", "weight": "3", "quantity": "11"}
]
‘) as jae
where jae::jsonb->>‘weight‘ = ‘3‘

#输出:

我们看到这样就可以到对json数据内部进行查询了。

json_extract_path   函数示例:

比如要获取键 ‘goods’ 的值:

{
"goods":

{"id": "676a13d3-0225-4431-b858-678c3cfeab74", "weight": "1", "quantity": "9999999"},
{"id": "111a13d3-0225-4431-b858-678c3cfeab75", "weight": "2", "quantity": "33"}
], 
"quantity": {"max": "150", "min": "2"}
}

select json_extract_path   (‘
{
"goods":

{"id": "676a13d3-0225-4431-b858-678c3cfeab74", "weight": "1", "quantity": "9999999"},
{"id": "111a13d3-0225-4431-b858-678c3cfeab75", "weight": "2", "quantity": "33"}
], 
"quantity": {"max": "150", "min": "2"}
}
‘ , ‘goods‘ )  ;   // 第二个参数表示获取键为goods的值

#输出:

json_extract_path   函数和  pgsql  提供的操作符  #>  是一样的。

select (‘
{
"goods":
[
{"id": "676a13d3-0225-4431-b858-678c3cfeab74", "weight": "1", "quantity": "9999999"},
{"id": "111a13d3-0225-4431-b858-678c3cfeab75", "weight": "2", "quantity": "33"}
],
"quantity": {"max": "150", "min": "2"}
}
‘) ::json #> ‘{goods}‘

两者的输出是一致的。

同样我们要输出 键quantity 下键max 的值:

select json_extract_path   (‘
{
"goods":

{"id": "676a13d3-0225-4431-b858-678c3cfeab74", "weight": "1", "quantity": "9999999"},
{"id": "111a13d3-0225-4431-b858-678c3cfeab75", "weight": "2", "quantity": "33"}
], 
"quantity": {"max": "150", "min": "2"}
}
‘ , ‘quantity‘,‘max‘ ) ;

-- 或

select (‘
{
"goods":

{"id": "676a13d3-0225-4431-b858-678c3cfeab74", "weight": "1", "quantity": "9999999"},
{"id": "111a13d3-0225-4431-b858-678c3cfeab75", "weight": "2", "quantity": "33"}
], 
"quantity": {"max": "150", "min": "2"}
}
‘) ::json #> ‘{quantity, max}‘

两者输出是一样的。

这几个函数是可以联合使用的。

比如我们要查询 键“goods” 下weight =2 的id 和quantity 值,语句如下:

select jae::json->>‘id‘ as id, jae::json->>‘quantity‘ as quantity from json_array_elements (
json_extract_path (‘
{
"goods":
[
{"id": "676a13d3-0225-4431-b858-678c3cfeab74", "weight": "1", "quantity": "9999999"},
{"id": "111a13d3-0225-4431-b858-678c3cfeab75", "weight": "2", "quantity": "33"}
],
"quantity": {"max": "150", "min": "2"}
}
‘ , ‘goods‘ ) ) as jae where jae::json->> ‘weight‘ = ‘2‘

#输出:

上述的json语句我们可以当做字段来使用,就相当于对表记录进行操作了。

接下来我们同个一个例子讲解json在表中的用法:

示例:查询表中jsonb_msg字段中goods下id=1003和1002的记录,表中输入如下图:

sql查询语句:

select name,* from upgrade_test.test1 test
where
( select count(*) from jsonb_array_elements (
jsonb_extract_path(test.json_msg , ‘goods‘ ) ) as jae where jae::json->> ‘id‘ in (‘1001‘,‘1003‘) ) > 0 ;

#输出:

效率还行:

Total query runtime: 11 msec
检索到 2 行。

官方文档页:

https://www.postgresql.org/docs/9.4/static/functions-json.html

时间: 2024-12-18 02:12:34

关于pgsql 的json 和jsonb 的数据查询操作笔记整理的相关文章

MongoDB源码分析——mongod数据查询操作

源码版本为MongoDB 2.6分支 Edit mongod数据查询操作 在mongod的初始化过程中说过,服务端接收到客户端消息后调用MyMessageHandler::process函数处理消息. class MyMessageHandler : public MessageHandler { public: ... virtual void process( Message& m , AbstractMessagingPort* port , LastError * le) { while

数据查询操作

一.模型类 class ArticleManager(models.Manager): def archive(self, **kwargs): l = [] month_list = [] for i in self.filter(**kwargs).values("create_time"): date = i['create_time'] month_list.append(date.month) t = date.strftime("%Y-%m-%d") i

mongodb数据库添加权限及简单数据库命令操作笔记

加固mongodb建议:修改数据库默认端口,添加数据库访问权限: 启动数据库(裸奔):C:\mongodb\bin>mongod --dbpath C:\MongoDB\data(同时用--dbpath指定数据存放地点为"db"文件夹.) 数据库管理:mongo.exe 新版的MongoDB已经不支持addUser方法了,改成createUser了. 启动数据库的注意事项: 指定端口启动数据库(不需要认证):E:\mongodb\bin>mongod --dbpath E:

oracle 数据库中 date类型数据查询操作,格式转换,字符转date

//查询日期(类型为date)的数据 select * from auth_organization_t t where to_char(create_date,'yyyy-mm-dd hh:mi:ss') = '2013-08-12 05:31:09' select to_char(create_date,'yyyy-mm-dd hh:mi:ss') from auth_organization_t t

Mysql表数据查询操作

1.简单查询 select * from user; 2.NULL查询 select * from user where hobby is NULL and age is not NULL; 3.in查询 select * from user where age in('22','23','24'); 4.between and查询 select * from user where age between 21 and 55; 5.or查询 select * from user where ag

django前后端分离 form_03(验证,数据查询,代码优化)

1.优化代码 把form验证的返回报错写成一个共用的类 该类在工程下建立了一个uitls-tools.py class FormatErrMsg: @property #装饰器-属性方法 调用的时候不需要加() def error_msg(self): #self.get_json_data() 是form自带的友好的报错提示 返回的是一个字典 message = '' for error_params, v in self.errors.get_json_data().items(): err

关于 pgsql 数据库json几个函数用法的效率测试

关于pgsql 几个操作符的效率测试比较1. json::->> 和 ->> 测试方法:单次运行100次,运行10个单次取平均时间.测试结果:->> 效率高 5% 左右 功能差异:json::->> 在使用前需要对对象转换为jsonb 然后再执行 ->> 操作,所以比->>更耗时 .所以如果我们需要对返回的对象进行jsonb操作,用jsonb_* 相关函数时,建议用jsonb_* 而不用 jsonb_*_text ,后者会把结果的js

MariaDB 10.0.X中,动态列支持 JSON 格式来获取数据。

MariaDB 10.0.X中,动态列(Dynamic Columns),可以支持 JSON 格式来获取数据. 为了兼容传统SQL语法,MariaDB 10和MySQL5.7支持原生JSON格式,即关系型数据库和文档型NoSQL数据库集于一身. 使用说明: ###表结构 create table assets (   item_name varchar(32) primary key, -- A common attribute for all items   dynamic_cols  blo

Jquery Mobile实例--利用优酷JSON接口读取视频数据

本文将介绍,如何利用JqueryMobile调用优酷API JSON接口显示视频数据. (1)注册用户接口. 首页,到 http://open.youku.com 注册一个账户,并通过验证.然后找到API接口 (http://open.youku.com/docs/tech_doc.html) 可以看到优酷提供不少API,本文将演示“通过视频关键词”接口. 点击进去后,会发现client_id和keyword是必填的,因此,未来构造的URL应该类似 https://openapi.youku.c