Python3 urllib 常用函数

1、获取url参数。

>>> from urllib import parse
>>> url = r‘https://docs.python.org/3.5/search.html?q=parse&check_keywords=yes&area=default‘
>>> parseResult = parse.urlparse(url)
>>> parseResult
ParseResult(scheme=‘https‘, netloc=‘docs.python.org‘, path=‘/3.5/search.html‘, params=‘‘, query=‘q=parse&check_keywords=yes&area=default‘, fragment=‘‘)
>>> param_dict = parse.parse_qs(parseResult.query)
>>> param_dict
{‘q‘: [‘parse‘], ‘check_keywords‘: [‘yes‘], ‘area‘: [‘default‘]}
>>> q = param_dict[‘q‘][0]
>>> q
‘parse‘

2、urlencode

>>> from urllib import parse
>>> query = {
	‘name‘: ‘walker‘,
	‘age‘: 99,
	}
>>> parse.urlencode(query)
‘name=walker&age=99‘

3、quote/quote_plus

>>> from urllib import parse
>>> parse.quote(‘a&b/c‘)    #未编码斜线
‘a%26b/c‘
>>> parse.quote_plus(‘a&b/c‘)    #编码了斜线
‘a%26b%2Fc‘

4、unquote/unquote_plus

from urllib import parse
>>> parse.unquote(‘1+2‘)    #不解码加号
‘a&b/c‘
>>> parse.unquote(‘1+2‘)    #把加号解码为空格
‘1 2‘

  如果你还想问为什么没有urldecode——再把示例1看五遍。^_^

相关阅读:urllib.parse — Parse URLs into components

*** walker ***

时间: 2024-10-21 00:03:34

Python3 urllib 常用函数的相关文章

Python3 urllib.parse 常用函数示例

Python3 urllib.parse 常用函数示例 http://blog.51cto.com/walkerqt/1766670 1.获取url参数. >>> from urllib import parse >>> url = r'https://docs.python.org/3.5/search.html?q=parse&check_keywords=yes&area=default' >>> parseResult = pa

[python]urllib与urllib2的常用函数

可以把urllib2当作urllib的扩增,比较明显的优势是urllib2.urlopen可以接受Request对象作为参数,从而可以控制HTTP Request的headers,进而实现模拟浏览器.模拟登录等操作. 做HTTP Request时应当尽量使用urllib2库,但是urllib.urlretrieve函数以及urllib.quote等一系列quote和unquote功能没有被加入urllib2中,因此有时也需要urllib的辅助. 此外常用的函数: urllib: #编码函数 ur

Python3.x的BeautifulSoup解析html常用函数

Python3.x的BeautifulSoup解析html常用函数 1,初始化: soup = BeautifulSoup(html) # html为html源代码字符串,type(html) == str 2,用tag获取相应代码块的剖析树: #当用tag作为搜索条件时,我们获取的包含这个tag块的剖析树: #<tag><xxx>ooo</xxx></tag> #这里获取head这个块 head = soup.find('head') # or # hea

python3 urllib模块

3.0版本中已经将urllib2.urlparse.和robotparser并入了urllib中,并且修改urllib模块,其中包含5个子模块,即是help()中看到的那五个名字. Python2中的urllib模块,在Python3中被修改为 20.5. urllib.request — Extensible library for opening URLs 20.6. urllib.response — Response classes used by urllib 20.7. urllib

python3内置函数详解

一. 简介 python内置了一系列的常用函数,以便于我们使用,python英文官方文档详细说明:点击查看, 为了方便查看,将内置函数的总结记录下来. 二. 使用说明 以下是Python3版本所有的内置函数: 1. abs() 获取绝对值 >>> abs(-10) 10 >>> abs(10) 10 >>> abs(0) 0 >>> a = -10 >>> a.__abs__() 10 2. all() 接受一个迭代

python3 内置函数大全

一. 简介 python内置了一系列的常用函数,以便于我们使用,python英文官方文档详细说明:点击查看, 为了方便查看,将内置函数的总结记录下来. 二. 使用说明 以下是Python3版本所有的内置函数: 1. abs() 获取绝对值 1 >>> abs(-10) 2 10 3 >>> abs(10) 4 10 5 >>> abs(0) 6 0 7 >>> a = -10 8 >>> a.__abs__() 9

Python3NumPy的常用函数

Python3NumPy的常用函数 1. txt文件 (1) 单位矩阵,即主对角线上的元素均为1,其余元素均为0的正方形矩阵. 在NumPy中可以用eye函数创建一个这样的二维数组,我们只需要给定一个参数,用于指定矩阵中1的元素个数. 例如,创建3×3的数组: import numpy as np I2 = np.eye(3) print(I2) [[1. 0. 0.] [0. 1. 0.] [0. 0. 1.]] (2) 使用savetxt函数将数据存储到文件中,当然我们需要指定文件名以及要保

Data Frame的常用函数

1.DataFrame的常用函数: (1)np.abs(frame) 绝对值, (2)apply function, lambda f= lambda x: x.max()-x.min(),frame.apply(f); frame.apply(f,axis = 1) f(x), def f(x): return Series([x.min(),x.max()], index=['min','max']),frame.apply(f)(3) applymap format f= lambda x

Oracle SQL语言之常用函数_超越OCP精通Oracle视频教程培训30

Oracle SQL语言之常用函数_超越OCP精通Oracle视频教程培训30 本课程介绍: Oracle视频教程,风哥本套oracle教程培训是<<Oracle数据库SQL语言实战培训教程>>的第5/5套:Oracle SQL语言之常用函数.主要学习Oracle数据库SQL聚合函数,分组函数,字符函数,转换函数,日期字符数字转换,日期函数,集合函数,分析函数等. Oracle SQL语言之常用函数,课程内容详细如下: 聚合函数-数据统计 分组函数-使用group by与havin