python接口自动化（四十）- logger 日志 - 下（超详解）

简介

　　按照上一篇的计划，这一篇给小伙伴们讲解一下：（1）多模块使用logging，（2）通过文件配置logging模块，（3）自己封装一个日志（logging）类。可能有的小伙伴在这里会有个疑问一个logging为什么分两篇的篇幅来介绍她呢？？？那是因为日志是非常重要的，用于记录系统、软件操作事件的记录文件或文件集合，可分为事件日志和消息日志。具有处理历史数据、诊断问题的追踪以及理解系统、软件的活动等重要作用，在开发或者测试软系统过程中出现了问题，我们首先想到的就是她——logging。她可不像泰戈尔说的：“天空没有留下翅膀的痕迹,但我已经飞过”；这个90后的小姑娘，她可是一个爱炫耀，爱显摆的人已经达到了人过留名、雁过留声的境界。好了逗大家一乐，下面开始进入今天的正题。

多模块使用logging

1、父模块fatherModule.py：

2、子模块sonModule.py：

3、运行结果，在控制和日志文件log.txt中输出：

　　首先在父模块定义了logger‘fatherModule‘，并对它进行了配置，就可以在解释器进程里面的其他地方通过getLogger(‘fatherModule‘)得到的对象都是一样的，不需要重新配置，可以直接使用。定义的该logger的子logger，

都可以共享父logger的定义和配置，所谓的父子logger是通过命名来识别，任意以‘fatherModule‘开头的logger都是它的子logger，例如‘fatherModule.son‘。

　　实际开发一个application，首先可以通过logging配置文件编写好这个application所对应的配置，可以生成一个根logger，如‘PythonAPP‘，然后在主函数中通过fileConfig加载logging配置，接着在application的其他地方、不同的模块中，可以使用根logger的子logger，

如‘PythonAPP.Core‘，‘PythonAPP.Web‘来进行log，而不需要反复的定义和配置各个模块的logger。

4、参考代码

fatherModule.py文件：

 1 # coding=utf-8
 2 # 1.先设置编码，utf-8可支持中英文，如上，一般放在第一行
 3
 4 # 2.注释：包括记录创建时间，创建人，项目名称。
 5 ‘‘‘
 6 Created on 2019-5-24
 7 @author: 北京-宏哥
 8 Project:学习和使用python的logging日志模块-多模块使用logging
 9 ‘‘‘
10 # 3.导入模块
11 import logging
12 import sonModule
13 logger = logging.getLogger("fatherModule")
14 logger.setLevel(level = logging.INFO)
15 handler = logging.FileHandler("log.txt")
16 handler.setLevel(logging.INFO)
17 formatter = logging.Formatter(‘%(asctime)s - %(name)s - %(levelname)s - %(message)s‘)
18 handler.setFormatter(formatter)
19
20 console = logging.StreamHandler()
21 console.setLevel(logging.INFO)
22 console.setFormatter(formatter)
23
24 logger.addHandler(handler)
25 logger.addHandler(console)
26
27
28 logger.info("creating an instance of sonModule.sonModuleClass")
29 a = sonModule.SonModuleClass()
30 logger.info("calling sonModule.sonModuleClass.doSomething")
31 a.doSomething()
32 logger.info("done with  sonModule.sonModuleClass.doSomething")
33 logger.info("calling sonModule.some_function")
34 sonModule.som_function()
35 logger.info("done with sonModule.some_function")

sonModule.py文件：

 1 # coding=utf-8
 2 # 1.先设置编码，utf-8可支持中英文，如上，一般放在第一行
 3
 4 # 2.注释：包括记录创建时间，创建人，项目名称。
 5 ‘‘‘
 6 Created on 2019-5-24
 7 @author: 北京-宏哥
 8 Project:学习和使用python的logging日志模块-多模块使用logging
 9 ‘‘‘
10 # 3.导入模块
11 import logging
12
13 module_logger = logging.getLogger("fatherModule.son")
14 class SonModuleClass(object):
15     def __init__(self):
16         self.logger = logging.getLogger("fatherModule.son.module")
17         self.logger.info("creating an instance in SonModuleClass")
18     def doSomething(self):
19         self.logger.info("do something in SonModule")
20         a = []
21         a.append(1)
22         self.logger.debug("list a = " + str(a))
23         self.logger.info("finish something in SonModuleClass")
24
25 def som_function():
26     module_logger.info("call function some_function")

文件配置logging模块

1、通过logging.config模块配置日志构造信息

logger.conf文件：

[loggers]
keys = root, example01, example02
[logger_root]
level = DEBUG
handlers = hand01, hand02
[logger_example01]
handlers = hand01, hand02
qualname = example01
propagate = 0
[logger_example02]
handlers = hand01, hand03
qualname = example02
propagate = 0
[handlers]
keys = hand01, hand02, hand03
[handler_hand01]
class = StreamHandler
level = INFO
formatter = form01
args=(sys.stdout, )
[handler_hand02]
class = FileHandler
level = DEBUG
formatter = form01
args = (‘log/test_case_log.log‘, ‘a‘)
[handler_hand03]
class = handlers.RotatingFileHandler
level = INFO
formatter = form01
args = (‘log/test_case_log.log‘, ‘a‘, 10*1024*1024,3)
[formatters]
keys = form01, form02
[formatter_form01]
format = %(asctime)s-%(filename)s-[line:%(lineno)d]-%(levelname)s-[LogInfoMessage]: %(message)s
datefmt = %a, %d %b %Y %H:%M:%S
[formatter_form02]
format = %(name)-12s: %(levelname)-8s-[日志信息]: %(message)s
datefmt = %a, %d %b %Y %H:%M:%S

一、实例：

1、实例代码

2、运行结果：

3、参考代码：

# coding=utf-8
# 1.先设置编码，utf-8可支持中英文，如上，一般放在第一行

# 2.注释：包括记录创建时间，创建人，项目名称。
‘‘‘
Created on 2019-5-27
@author: 北京-宏哥
Project:学习和使用python的logging日志模块-多模块使用logging
‘‘‘
# 3.导入模块
import logging
import logging.config

logging.config.fileConfig("logger.conf")
logger = logging.getLogger("example01")

logger.debug(‘This is debug message‘)
logger.info(‘This is info message‘)
logger.warning(‘This is warning message‘)

二、实例

1、实例代码

2、运行结果

3、参考代码：

# coding=utf-8
# 1.先设置编码，utf-8可支持中英文，如上，一般放在第一行

# 2.注释：包括记录创建时间，创建人，项目名称。
‘‘‘
Created on 2019-5-24
@author: 北京-宏哥
Project:学习和使用python的logging日志模块-多模块使用logging
‘‘‘
# 3.导入模块
import logging
import logging.config

logging.config.fileConfig("logger.conf")
logger = logging.getLogger("example02")

logger.debug(‘This is debug message‘)
logger.info(‘This is info message‘)
logger.warning(‘This is warning message‘)

2、通过JSON文件配置

json配置文件：

{
    "version":1,
    "disable_existing_loggers":false,
    "formatters":{
        "simple":{
            "format":"%(asctime)s - %(name)s - %(levelname)s - %(message)s"
        }
    },
    "handlers":{
        "console":{
            "class":"logging.StreamHandler",
            "level":"DEBUG",
            "formatter":"simple",
            "stream":"ext://sys.stdout"
        },
        "info_file_handler":{
            "class":"logging.handlers.RotatingFileHandler",
            "level":"INFO",
            "formatter":"simple",
            "filename":"info.log",
            "maxBytes":"10485760",
            "backupCount":20,
            "encoding":"utf8"
        },
        "error_file_handler":{
            "class":"logging.handlers.RotatingFileHandler",
            "level":"ERROR",
            "formatter":"simple",
            "filename":"errors.log",
            "maxBytes":10485760,
            "backupCount":20,
            "encoding":"utf8"
        }
    },
    "loggers":{
        "my_module":{
            "level":"ERROR",
            "handlers":["info_file_handler"],
            "propagate":"no"
        }
    },
    "root":{
        "level":"INFO",
        "handlers":["console","info_file_handler","error_file_handler"]
    }
}

1、通过JSON加载配置文件，然后通过logging.dictConfig配置logging：

2、运行结果：

3、参考代码：

 1 import json
 2 import logging.config
 3 import os
 4
 5 def setup_logging(default_path = "logging.json",default_level = logging.INFO,env_key = "LOG_CFG"):
 6     path = default_path
 7     value = os.getenv(env_key,None)
 8     if value:
 9         path = value
10     if os.path.exists(path):
11         with open(path,"r") as f:
12             config = json.load(f)
13             logging.config.dictConfig(config)
14     else:
15         logging.basicConfig(level = default_level)
16
17 def func():
18     logging.info("start func")
19
20     logging.info("exec func")
21
22     logging.info("end func")
23
24 if __name__ == "__main__":
25     setup_logging(default_path = "logging.json")
26     func()

3、通过YAML文件配置

1、首先要导入yaml模块，输入命令  python2： pip install yaml          python3：pip install pyyaml

2、通过YAML文件进行配置，比JSON看起来更加简介明了：

logging.yaml文件：

version: 1
disable_existing_loggers: False
formatters:
        simple:
            format: "%(asctime)s - %(name)s - %(levelname)s - %(message)s"
handlers:
    console:
            class: logging.StreamHandler
            level: DEBUG
            formatter: simple
            stream: ext://sys.stdout
    info_file_handler:
            class: logging.handlers.RotatingFileHandler
            level: INFO
            formatter: simple
            filename: info.log
            maxBytes: 10485760
            backupCount: 20
            encoding: utf8
    error_file_handler:
            class: logging.handlers.RotatingFileHandler
            level: ERROR
            formatter: simple
            filename: errors.log
            maxBytes: 10485760
            backupCount: 20
            encoding: utf8
loggers:
    my_module:
            level: ERROR
            handlers: [info_file_handler]
            propagate: no
root:
    level: INFO
    handlers: [console,info_file_handler,error_file_handler]

3、通过YAML加载配置文件，然后通过logging.dictConfig配置logging：

4、运行结果：

5、参考代码：

# coding=utf-8
# 1.先设置编码，utf-8可支持中英文，如上，一般放在第一行

# 2.注释：包括记录创建时间，创建人，项目名称。
‘‘‘
Created on 2019-5-24
@author: 北京-宏哥
Project:学习和使用python的logging日志模块-yaml文件配置logging
‘‘‘
# 3.导入模块
import yaml
import logging.config
import os

def setup_logging(default_path = "logging.yaml",default_level = logging.INFO,env_key = "LOG_CFG"):
    path = default_path
    value = os.getenv(env_key,None)
    if value:
        path = value
    if os.path.exists(path):
        with open(path,"r") as f:
            config = yaml.load(f)
            logging.config.dictConfig(config)
    else:
        logging.basicConfig(level = default_level)

def func():
    logging.info("start func")

    logging.info("exec func")

    logging.info("end func")

if __name__ == "__main__":
    setup_logging(default_path = "logging.yaml")
    func()

注意：配置文件中“disable_existing_loggers” 参数设置为 False；如果不设置为False，创建了 logger，然后你又在加载日志配置文件之前就导入了模块。logging.fileConfig 与 logging.dictConfig 默认情况下会使得已经存在的 logger 失效。那么，这些配置信息就不会应用到你的 Logger 上。“disable_existing_loggers” = False解决了这个问题

自己封装一个logging类

1、实例代码：

2、运行结果：

3、参考代码：

 1 # coding=utf-8
 2 # 1.先设置编码，utf-8可支持中英文，如上，一般放在第一行
 3
 4 # 2.注释：包括记录创建时间，创建人，项目名称。
 5 ‘‘‘
 6 Created on 2019-5-27
 7 @author: 北京-宏哥
 8 Project:学习和使用python的logging日志模块-自己封装logging
 9 ‘‘‘
10 # 3.导入模块
11 import logging
12 class Log(object):
13     def __init__(self, name=__name__, path=‘mylog.log‘, level=‘DEBUG‘):
14         self.__name = name
15         self.__path = path
16         self.__level = level
17         self.__logger = logging.getLogger(self.__name)
18         self.__logger.setLevel(self.__level)
19
20     def __ini_handler(self):
21         """初始化handler"""
22         stream_handler = logging.StreamHandler()
23         file_handler = logging.FileHandler(self.__path, encoding=‘utf-8‘)
24         return stream_handler, file_handler
25
26     def __set_handler(self, stream_handler, file_handler, level=‘DEBUG‘):
27         """设置handler级别并添加到logger收集器"""
28         stream_handler.setLevel(level)
29         file_handler.setLevel(level)
30         self.__logger.addHandler(stream_handler)
31         self.__logger.addHandler(file_handler)
32
33     def __set_formatter(self, stream_handler, file_handler):
34         """设置日志输出格式"""
35         formatter = logging.Formatter(‘%(asctime)s-%(name)s-%(filename)s-[line:%(lineno)d]‘
36                                       ‘-%(levelname)s-[日志信息]: %(message)s‘,
37                                       datefmt=‘%a, %d %b %Y %H:%M:%S‘)
38         stream_handler.setFormatter(formatter)
39         file_handler.setFormatter(formatter)
40
41     def __close_handler(self, stream_handler, file_handler):
42         """关闭handler"""
43         stream_handler.close()
44         file_handler.close()
45
46     @property
47     def Logger(self):
48         """构造收集器，返回looger"""
49         stream_handler, file_handler = self.__ini_handler()
50         self.__set_handler(stream_handler, file_handler)
51         self.__set_formatter(stream_handler, file_handler)
52         self.__close_handler(stream_handler, file_handler)
53         return self.__logger
54
55
56 if __name__ == ‘__main__‘:
57     log = Log(__name__, ‘file.log‘)
58     logger = log.Logger
59     logger.debug(‘I am a debug message‘)
60     logger.info(‘I am a info message‘)
61     logger.warning(‘I am a warning message‘)
62     logger.error(‘I am a error message‘)
63     logger.critical(‘I am a critical message‘)

小结

1、在yaml文件配置logging的时候，会有个报警信息。有代码洁癖的人，可以处理一下

2、是什么原因造成上面的告警呢？？？是因为：YAML 5.1版本后弃用了yaml.load(file)这个用法，因为觉得很不安全，5.1版本之后就修改了需要指定Loader，通过默认加载??器（FullLoader）禁止执行任意函数，该load函数也变得更加安全。

3、解决办法：

不用改很多代码 加一句就行了 在yaml.load(f, Loader=yaml.FullLoader) 加上 Loader=yaml.FullLoader 就行了。这里要注意的是L要大写的，否则会报错的。

4、加上以后，看一下运行结果：

最后给大家留个彩蛋：文章中有一处bug，会影响运行结果而报错，聪明的你，可以找到吗？？？嘿嘿！！！欢迎互动和留言

原文地址：https://www.cnblogs.com/du-hong/p/10913133.html

时间： 2024-08-13 14:55:33

python接口自动化（四十）- logger 日志 - 下（超详解）的相关文章

python接口自动化（十四）--session关联接口（详解）

简介 上一篇cookie绕过验证码模拟登录博客园,但这只是第一步,一般登录后,还会有其它的操作,如发帖,评论等等,这时候如何保持会话呢? session简介 1.通过help方法查看帮助文档,截图一部分,后面省略了,有兴趣的自己可以敲一下看看 2.参考代码 1 # coding:utf-8 2 import requests 3 help(requests.session()) 使用session登录 1.使用session登录只需在登录的基础上稍做修改,即可 2.参考代码 # coding:u

python接口自动化（十六）--参数关联接口后传（详解）

简介 大家对前边的自动化新建任务之后,接着对这个新建任务操作了解之后,希望带小伙伴进一步巩固胜利的果实,夯实基础.因此再在沙场实例演练一下博客园的相关接口.我们用自动化发随笔之后,要想接着对这篇随笔操作,不用说就需 要用参数关联了,发随笔之后会有一个随笔的 id,获取到这个 id,继续操作传这个随笔 id 就可以了(博客园的登录机制已经变了,不能用账号和密码登录了,这里用 cookie 登录) 大致流程步骤:web界面操作登录抓包查看cookie—>代码模拟cookie登录—>web界面操作新

python接口自动化（十八）--重定向（Location）（详解）

简介 在实际工作中,有些接口请求完以后会重定向到别的url,而你却需要重定向前的url.URL主要是针对虚拟空间而言,因为不是自己独立管理的服务器,所以无法正常进行常规的操作.但是自己又不希望通过主域名的二级目录进行访问,而 是希望通过主域名的二级域名进行访问.所以这个时候就会用到URL重定向. 重定向过程好比有个绰号叫“浏览器”的人写信找张三借钱,张三回信说没有钱,让“浏览器”去找李四借,并将李四现在的通信地址告诉给了“浏览器 ”.于是,“浏览器”又按张三提供通信地址给李四写信借钱,李四收到信

第四十课：CSS3 transition详解

W3C中对transition是这样描述的:允许css的属性值在一定的时间内平滑的过渡,也就是说,以动画的效果改变css的属性值. transition主要包含4个属性值:transition-property:样式名:transition-duration:持续时间:transition-timing-function:缓动公式:transition-delay:延迟多长时间才触发.接下来我们来详细讲下这四个属性值. transition-property transition-propert

Appium+python自动化（五）- 模拟器（超详解）

简介 Appium是做安卓自动化的一个比较流行的工具,对于想要学习该工具但是又局限于或许当前有些小伙伴没 android 手机来说,可以通过安卓模拟器来解决该问题,下面就讲解使用appium连接安卓模拟器的操作步骤.而宏哥是由于手机数据线问题,也只好先用模拟器来替代真机玩了.所以没有安卓手机的大款的小伙伴们不要着急,这时候可以在电脑上开个模拟器玩玩,下面就分别介绍两种不同的模拟器:(1)Google自带的(2)夜神模拟器:他们的安装.配置.连接等等.下面和大家一起学习交流.分享一下.第三篇已经将

python接口自动化2-发送post请求

前言 发送post的请求参考例子很简单,实际遇到的情况却是很复杂的,首先第一个post请求肯定是登录了,但登录是最难处理的.登录问题解决了,后面都简单了. 一.查看官方文档 1.学习一个新的模块,其实不用去百度什么的,直接用help函数就能查看相关注释和案例内容. >>import requests >>help(requests) 2.查看python发送get和post请求的案例 >>> import requests       >>> r

python接口自动化5-Json数据处理

前言 有些post的请求参数是json格式的,这个前面第二篇post请求里面提到过,需要导入json模块处理. 一般常见的接口返回数据也是json格式的,我们在做判断时候,往往只需要提取其中几个关键的参数就行,这时候就需要json来解析返回的数据了. 一.json模块简介 1.Json简介:Json,全名 JavaScript Object Notation,是一种轻量级的数据交换格式,常用于http请求中 2.可以用help(json),查看对应的源码注释内容 Encoding basic P

python接口自动化8-参数化

前言 前面一篇实现了参数的关联,那种只是记流水账的完成功能,不便于维护,也没什么可读性,接下来这篇可以把每一个动作写成一个函数,这样更方便了. 参数化的思维只需记住一点:不要写死 一.登录函数 1.s参数是session的一个实例类,先放这里,方便写后面代码 2.登录函数传三个参数,s是需要调用前面的session类,所以必传,可以传个登录的url,然后payload是账号和密码 二.保存草稿 1.编辑内容的标题title和正文body_data参数化了,这样后面可以方便传不同值 2.这里返回了

python接口自动化7-参数关联

前言 我们用自动化发帖之后,要想接着对这篇帖子操作,那就需要用参数关联了,发帖之后会有一个帖子的id,获取到这个id,继续操作传这个帖子id就可以了 一.删除草稿箱 1.我们前面讲过登录后保存草稿箱,那可以继续接着操作:删除刚才保存的草稿 2.用fiddler抓包,抓到删除帖子的请求,从抓包结果可以看出,传的json参数是postId 3.这个postId哪里来的呢?可以看上个请求url地址 4.也就是说保存草稿箱成功之后,重定向一个url地址,里面带有postId这个参数.那接下来我们提取出来

python接口自动化4-绕过验证码登录（cookie）

前言 有些登录的接口会有验证码:短信验证码,图形验证码等,这种登录的话验证码参数可以从后台获取的(或者查数据库最直接). 获取不到也没关系,可以通过添加cookie的方式绕过验证码. 一.抓登录cookie 1.登录后会生成一个已登录状态的cookie,那么只需要直接把这个值添加到cookies里面就可以了. 2.可以先手动登录一次,然后抓取这个cookie,这里就需要用抓包工具fiddler了 3.先打开博客园登录界面,手动输入账号和密码(勾选下次自动登录) 4.打开fiddler抓包工具,刷