你必须知道的python运维常用脚本!(日常更新)

github地址:https://github.com/opsonly, 上面是一个基于python3.7django2.1的多人博客系统,喜欢的可以给个star~



判断是否是一个目录

#!/usr/bin/env python3
# -*- coding: utf-8 -*-
# @Time    : 2018-12-18 15:16
# @Author  : opsonly
# @Site    :
# @File    : opsUse.py
# @Software: PyCharm
import os

dir = "/var/www/html/EnjoyCarApi/"
if os.path.isdir(dir):
    print(‘%s is a dir‘ % dir)
else:
    print(‘%s is not a dir‘ % dir)

系统内存与磁盘检测

#!/usr/bin/env python3
# -*- coding: utf-8 -*-
# @Time    : 2018-12-17 17:16
# @Author  : opsonly
# @Site    :
# @File    : systemissue.py
# @Software: PyCharm

import psutil

def memissue():
    print(‘内存信息:‘)
    mem = psutil.virtual_memory()
    # 单位换算为MB
    memtotal = mem.total/1024/1024
    memused = mem.used/1024/1024
    membaifen = str(mem.used/mem.total*100) + ‘%‘

    print(‘%.2fMB‘ % memused)
    print(‘%.2fMB‘ % memtotal)
    print(membaifen)

def cuplist():
    print(‘磁盘信息:‘)
    disk = psutil.disk_partitions()
    diskuse = psutil.disk_usage(‘/‘)
    #单位换算为GB
    diskused = diskuse.used / 1024 / 1024 / 1024
    disktotal = diskuse.total / 1024 / 1024 / 1024
    diskbaifen = diskused / disktotal * 100
    print(‘%.2fGB‘ % diskused)
    print(‘%.2fGB‘ % disktotal)
    print(‘%.2f‘ % diskbaifen)

memissue()
print(‘*******************‘)
cuplist()

统计nginx日志前十ip访问量并以柱状图显示

#!/usr/bin/env python3
# -*- coding: utf-8 -*-
# @Time    : 2018-12-18 15:49
# @Author  : opsonly
# @Site    :
# @File    : nginx_ip.py
# @Software: PyCharm

import matplotlib.pyplot as plt
#
nginx_file = ‘nginx2018-12-18_07:45:26‘

ip = {}
# 筛选nginx日志文件中的ip
with open(nginx_file) as f:
    for i in f.readlines():
        s = i.strip().split()[0]
        lengh = len(ip.keys())

        # 统计每个ip的访问量以字典存储
        if s in ip.keys():
            ip[s] = ip[s] + 1
        else:
            ip[s] = 1

#以ip出现的次数排序返回对象为list
ip = sorted(ip.items(), key=lambda e:e[1], reverse=True)

#取列表前十
newip = ip[0:10:1]
tu = dict(newip)

x = []
y = []
for k in tu:
    x.append(k)
    y.append(tu[k])
plt.title(‘ip access‘)
plt.xlabel(‘ip address‘)
plt.ylabel(‘PV‘)

#x轴项的翻转角度
plt.xticks(rotation=70)

#显示每个柱状图的值
for a,b in zip(x,y):
    plt.text(a, b, ‘%.0f‘ % b, ha=‘center‘, va= ‘bottom‘,fontsize=7)

plt.bar(x,y)
plt.legend()
plt.show()



查看网段里有多少ip地址

#!/usr/bin/env python3
# -*- coding: utf-8 -*-
# @Time    : 2018-12-18 15:31
# @Author  : opsonly
# @Site    :
# @File    : ipTest.py
# @Software: PyCharm
import IPy

ip = IPy.IP(‘172.16.0.0/26‘)

print(ip.len())
for i in ip:
    print(i)


gitlab钩子脚本,实现简单自动化操作

#!/usr/bin/env python3
# -*- coding: utf-8 -*-
# @Time    : 2018-12-18 17:41
# @Author  : opsonly
# @Site    :
# @File    : gitlabCi.py
# @Software: PyCharm

from flask import Flask,request,render_template,make_response,Response
import json,os,re,requests
import subprocess

app = Flask(__name__)
null = ""
cmd = "/var/www/html/ladmin-devel/"
@app.route(‘/test‘,methods=[‘POST‘])
def hello():
    json_dict = json.loads(request.data)

    name = json_dict[‘event_name‘]
    ref = json_dict[‘ref‘][11:]
    project = json_dict[‘project‘][‘name‘]

    if name == ‘push‘ and ref == ‘master‘:
        os.chdir(cmd)
        s = subprocess.getoutput(‘sudo -u nginx composer install‘)
        return Response(s)
    else:
        return Response(‘none‘)

if __name__ == ‘__main__‘:
    app.run(host=‘0.0.0.0‘,port=8080)

解析一组域名的ip地址

#!/usr/bin/env python3
# -*- coding: utf-8 -*-
# @Time    : 2018-12-20 10:21
# @Author  : opsonly
# @Site    :
# @File    : dnsReloves.py
# @Software: PyCharm

import dns.resolver
from collections import defaultdict
hosts = [‘baidu.com‘,‘weibo.com‘]
s = defaultdict(list)
def query(hosts):
    for host in hosts:
        ip = dns.resolver.query(host,"A")
        for i in ip:
            s[host].append(i)

    return s

for i in query(hosts):

    print(i,s[i])

清除指定redis缓存

#!/usr/bin/env python3
# -*- coding: utf-8 -*-
# @Time    : 2018-12-20 15:19
# @Author  : opsonly
# @Site    :
# @File    : redisdel.py
# @Software: PyCharm

import redis

#选择连接的数据库
db = input(‘输入数据库:‘)
r = redis.Redis(host=‘127.0.0.1‘,port=6379,db=0)

#输入要匹配的键名
id = input(‘请输入要执匹配的字段:‘)
arg = ‘*‘ + id + ‘*‘

n = r.keys(arg)
#查看匹配到键值
for i in n:
    print(i.decode(‘utf-8‘))

#确定清除的键名
delid = input(‘输入要删除的键:‘)

print(‘清除缓存 %s 成功‘ % delid)

下载阿里云RDS二进制日志

#!/usr/bin/env python3
# -*- coding: utf-8 -*-
# @Time    : 2018-12-12 13:52
# @Author  : opsonly
# @Site    :
# @File    : rds_binlog.py
# @Software: PyCharm

‘‘‘
查询阿里云rds binlog日志
‘‘‘

import base64,urllib.request
import hashlib
import hmac
import uuid,time,json,wget

class RDS_BINLOG_RELATE(object):

    def __init__(self):
        #阿里云的id和key
        self.access_id = ‘**********************‘
        self.access_key = ‘**********************‘

    #通过id和key来进行签名
    def signed(self):
        timestamp = time.strftime("%Y-%m-%dT%H:%M:%SZ", time.gmtime())
        header = {
            ‘Action‘: ‘DescribeBinlogFiles‘,
            ‘DBInstanceId‘: ‘rm-wz9azm783q621n9‘,
            ‘StartTime‘: ‘2018-07-11T15:00:00Z‘,
            ‘EndTime‘: timestamp,
            ‘Format‘: ‘JSON‘,
            ‘Version‘: ‘2014-08-15‘,
            ‘AccessKeyId‘: self.access_id,
            ‘SignatureVersion‘: ‘1.0‘,
            ‘SignatureMethod‘: ‘HMAC-SHA1‘,
            ‘SignatureNonce‘: str(uuid.uuid1()),
            ‘TimeStamp‘: timestamp,

        }

        #对请求头进行排序
        sortedD = sorted(header.items(), key=lambda x: x[0])
        url = ‘https://rds.aliyuncs.com‘
        canstring = ‘‘

        #将请求参数以#连接
        for k, v in sortedD:
            canstring += ‘&‘ + self.percentEncode(k) + ‘=‘ + self.percentEncode(v)

        #对请求连接进行阿里云要的编码规则进行编码
        stiingToSign = ‘GET&%2F&‘ + self.percentEncode(canstring[1:])

        bs = self.access_key + ‘&‘
        bs = bytes(bs, encoding=‘utf8‘)
        stiingToSign = bytes(stiingToSign, encoding=‘utf8‘)
        h = hmac.new(bs, stiingToSign, hashlib.sha1)
        stiingToSign = base64.b64encode(h.digest()).strip()

        #将签名加入到请求头
        header[‘Signature‘] = stiingToSign

        #返回url
        url = url + "/?" + urllib.parse.urlencode(header)
        return url

    #按照规则替换
    def percentEncode(self,store):
        encodeStr = store
        res = urllib.request.quote(encodeStr)
        res = res.replace(‘+‘, ‘%20‘)
        res = res.replace(‘*‘, ‘%2A‘)
        res = res.replace(‘%7E‘, ‘~‘)
        return str(res)

    #筛选出链接下载二进制日志文件
    def getBinLog(self):
        binlog_url = self.signed()
        req = urllib.request.urlopen(binlog_url)
        req = req.read().decode(‘utf8‘)
        res = json.loads(req)

        for i in res[‘Items‘][‘BinLogFile‘]:
            wget.download(i[‘DownloadLink‘])

s = RDS_BINLOG_RELATE()
s.getBinLog()


喜欢的可以关注一下,不断更新哦~

原文地址:http://blog.51cto.com/dashui/2334754

时间: 2024-11-10 00:39:41

你必须知道的python运维常用脚本!(日常更新)的相关文章

Python 运维常用模块

基础库:sys.os(os.path.os.stat).time.logging.prarmiko.re.random Python运维常用的20个库 1.psutil是一个跨平台库(https://github.com/giampaolo/psutil)能够实现获取系统运行的进程和系统利用率(内存,CPU,磁盘,网络等),主要用于系统监控,分析和系统资源及进程的管理. 2.IPy(http://github.com/haypo/python-ipy),辅助IP规划. 3.dnspython(h

python运维常用语法

os.path.exists('/data') 判断目录和文件是否存在,判断当前路径是否存在 os.path.isdir('/data') 判断是否是一个目录os.path.isfile('/data/1.txt') 判断是否是一个文件os.access('/data/a', os.F_OK) 判断文件或目录是否存在,os.R_OK读 os.X_OK执行os.remove('/home/test/1.txt') 删除文件os.listdir('/home/test/') 把当前目录下的所有文件组

[python]运维辅助脚本

以下代码在python 2.6.6下测试通过 添加帐号并修改密码: (注:linux的expect命令也可以完成,交互式自动输入的功能) #!/usr/bin/env python account = 'sl_t1' passwd='a1p2p3l4e5' cmd_useradd = 'useradd %s' % (account)      #添加用户命令,根据需要自行修改 import subprocess as sp def useradd(): cmd = 'export LC_ALL=

【Linux】MySQL 运维常用脚本

目录 操作规范 1.数据操作,必须谨慎,线上尤甚!!! 2.线上数据操作,必须备份!备份需完整.可用,备份使用自己最容易操作回滚的方式. 3.数据操作,能修改数据解决的决不删除 4.不确定的操作不做,不确定的命令不敲 5.如果出现问题,例如数据丢失.数据文件损坏,必须首先完整备份当前环境,保证后续操作不会造成更大的影响,以便留给能解决问题的人解决. 6.不允许移动.修改.删除 运行中的数据库的任意数据文件. 7.不允许删除近期生成的.未备份的binlog 8.不允许在 OS 命令行 键入 密码

Python系统运维常用库

Python系统运维常用库 1.psutil是一个跨平台库(http://code.google.com/p/psutil/) 能够实现获取系统运行的进程和系统利用率(内存,CPU,磁盘,网络等),主要用于系统监控,分析和系统资源及进程的管理. 2.IPy(http://github.com/haypo/python-ipy),辅助IP规划. 3.dnspython(http://dnspython.org)Python实现的一个DNS工具包. 4.difflib:difflib作为Python

服务器运维常用的python模块概述

最近开始复习python的使用,把服务器运维常用的模块的用法进行了实例化概述. ==========sort========================= python 排序: ls=[1,31,13,141,41] ls.sort() print ls 元组sort: >>> lst=[('wyl',24),('hjj',25),('zs',22),('lisi',14)] >>> sorted(lst,key=lambda lst:lst[1],reverse=

企业技术负责人必须知道的DevOps10个小技巧

DevOps成为越来越多的大型公司和组织的关键,所以参考一些公司成功实施DevOps的一些做法对我们很重要. 很明显,只要正确运用,DevOps会是非常有效的工具.今年6月份,一份Puppet问卷显示,使用DevOps方法的IT部门成功部署软件的次数平均是不使用的200倍.同时,他们的恢复次数比没使用DevOps的同行多了24次,而且修改配置的失败率降到原来的三分之一. 因为这些成功,DevOps变得格外流行,一份2012年以来的真实报告显示DevOps职位比例从不到1%增加到30%. 下面列举

《jQuery风暴》第2章 必须知道的JavaScript知识

第2章 必须知道的JavaScript知识 JavaScript是jQuery应用的基础,掌握JavaScript这门语言是使用jQuery的基础条件.本章不会全面细致的讲解JavaScript的全部, 而是讲解其精髓,这些知识可以提升大家的JavaScript内功.切忌,要修炼上乘的武功,必须要有深厚的内功基础,否则只可学到其招式而发挥不了功力.JavaScript实际上包括三部分: w   ECMAScript 描述了该语言的语法和基本对象. w   DOM 描述了处理网页内容的方法和接口.

《你必须知道的.NET》读书笔记一:小OO有大智慧

此篇已收录至<你必须知道的.Net>读书笔记目录贴,点击访问该目录可以获取更多内容. 一.对象  (1)出生:系统首先会在内存中分配一定的存储空间,然后初始化其附加成员,调用构造函数执行初始化,这样一个对象实体就完成了出生过程. Person aPerson = new Person("小周" , 25); (2)旅程:在某种程度上就是外界通过方法与对象交互,从而达到改变对象状态信息的过程.这也和人的生存之道暗合. aPerson.ChangeName("Edis