Python实现ECS自动镜像创建&镜像复制至其他地域

一、背景

1.1 问题:

同事反馈有可以鉴于目前几次大的公有云事故,腾讯云/阿里云两大公有云厂商尚且存在这样令人触目惊心的时刻,更何况其他厂商和我们的日常操作,有人的地方就有误操作,百分之一的风险但如果一旦发生就是100%的问题,虽SLA但或多或少存在影响,客户反馈如果阿里的A地域发生故障,例如地质灾害或不可控因素引发的ecs无法访问,用户数据都在云上无法操作情况下该如何,但考虑到不同地域灾备的高额度IT成本,想采用每天ecs的冷备。

1.2 思路:

在最大程度的降低IT成本,又想在不可控大规模地域性灾难面前做些什么,每天凌晨业务低峰期对ECS制作镜像,同时复制到其他的不同地域,如北京的镜像复制到上海,当北京整个region异常情况下,可利用复制在目标地域的ECS创建出来,在此抛砖引玉,后续可以将ecs在目标地域开出来并关机,归档删除之前的镜像,等等。同样可以将RDS备份也同样备份到异地OSS内,目前阿里已经有EBS非常方便的灾难情况下恢复RDS。利用此思路同意的适用于其他场景下。

二、代码

2.1 结构


github地址

2.2 核心代码

配置文件


# 阿里云ak配置,建议采用子账户只授权ecs镜像操作
[common]
# 阿里云acccesskeyid
accessKeyId = LTAIhfXxxxxxxx
# 阿里云accesssecret
accessSecret = GwfAMvR4K2xxxxxxxxxxxxxxxxxxxx
# log目录名称
logdir_name = logdir
# log文件名称
logfile_name = ecsoperlog.log

# ecs源地域配置信息段
#支持在华北 1、华北 2、华北 3、华北 5、华东 1、华东 2 和华南 1 地域之间复制镜像。涉及其他国家和地区地域时,可以 提交工单 申请
[source]
# 源地域实例regionid,可以参考:https://help.aliyun.com/document_detail/40654.html?spm=a2c1g.8271268.10000.5.5f98df25B98bhJ
s_RegionId = cn-shanghai

# 源实例id
s_InstanceId = i-uf6er9hxb1vt0bxgjctw

# 源端制作镜像name
s_ImageName = api-source-image

# 源镜像描述信息
s_Description = api-source-image源镜像描述信息

# 镜像复制目的地域配置信息段
[destination]
# 目的地域实例regionid,
d_DestinationRegionId = cn-qingdao

# 复制过来的镜像名称
d_DestinationImageName = api-destination-image

# 复制过来的镜像描述信息
d_DestinationDescription = api-destination-image目的镜像描述信息

image操作(制作镜像->查看镜像制作状态->复制镜像)

    def _create_image(self):
        """
        创建镜像
        :return:返回镜像id
        """
        s_timer = time.strftime("%Y-%m-%d-%H:%M", time.localtime(time.time()))
        request = CreateImageRequest.CreateImageRequest()
        request.set_accept_format(‘json‘)
        request.add_query_param(‘RegionId‘, self.s_RegionId)
        request.add_query_param(‘InstanceId‘, self.s_InstanceId)
        request.add_query_param(‘ImageName‘, self.s_ImageName + s_timer)
        request.add_query_param(‘Description‘, self.s_Description + s_timer)
        response = self.ecshelper.do_action_with_exception(request)
        self.logoper.info(‘创建镜像任务已提交,镜像id:%s‘ % json.loads(response)["ImageId"])
        print(‘创建镜像任务已提交,镜像id:%s‘ % json.loads(response)["ImageId"])
        return json.loads(response)["ImageId"]

 def _describe_image(self,imageid):
        """
        查询image状态
        :param imageid:
        :return:
        """
        request = DescribeImagesRequest.DescribeImagesRequest()
        request.set_accept_format(‘json‘)
        request.add_query_param(‘RegionId‘, self.s_RegionId)
        request.add_query_param(‘ImageId‘, imageid)
        response = self.ecshelper.do_action_with_exception(request)
        # 进度 json.loads(response)[‘Images‘][‘Image‘][0][‘Progress‘]
        self.logoper.info(‘镜像创建进度:%s‘ %json.loads(response)[‘Images‘][‘Image‘][0][‘Progress‘])
        # 镜像状态
        return json.loads(response)[‘Images‘][‘Image‘][0][‘Status‘]

    #镜像复制
    def _copy_image(self,imageid):
        """
        镜像复制
        :param imageid:源镜像id
        :return: 复制成功后的镜像id
        """
        flag = True
        while flag:
            try:
                if self._describe_image(imageid) == ‘Available‘:
                    flag = False
                else:
                    time.sleep(300)
            except Exception as e:
                pass
        print(‘镜像已经创建完成‘)
        d_timer = time.strftime("%Y-%m-%d-%H:%M", time.localtime(time.time()))
        request = CopyImageRequest.CopyImageRequest()
        request.set_accept_format(‘json‘)
        request.add_query_param(‘RegionId‘, self.s_RegionId)
        request.add_query_param(‘DestinationRegionId‘, self.d_DestinationRegionId)
        request.add_query_param(‘DestinationImageName‘, self.d_DestinationImageName + d_timer)
        request.add_query_param(‘DestinationDescription‘, self.d_DestinationDescription + d_timer)
        request.add_query_param(‘ImageId‘, imageid)
        response = self.ecshelper.do_action_with_exception(request)
        self.logoper.info(‘复制镜像任务已提交,镜像id:%s‘ % json.loads(response)[‘ImageId‘])
        print(‘复制镜像任务已提交,镜像id:%s‘ % json.loads(response)[‘ImageId‘])
        return json.loads(response)[‘ImageId‘]

三、测试

3.1 查看运行结果

3.2 查看web控制台

源镜像

添加了时间戳,方便查看

目的地域镜像

3.3 查看日志

四、优化

  • 可以后续增加对制定天数的镜像进行归档删除

原文地址:http://blog.51cto.com/kaliarch/2150076

时间: 2024-08-29 14:02:38

Python实现ECS自动镜像创建&镜像复制至其他地域的相关文章

Docker基础-使用Dockerfile创建镜像

1.基本结构 Dockerfile由一行行命令语句组成,并支持以#开头的注释行.例如: # This dockerfile uses the ubuntu image # VERSION 2 - EDITION 1 # Author: docker_user # Command format: Instruction [arguments / command ] .. # Base image to use, this nust be set as the first line FROM ubu

Dockerfile创建镜像模板详解

Dockerfile是一个文本格式的配置文件,用户可以使用Dockfile快速创建自定义的镜像.Dockerfile是由一行行的命令语句组成,并且支持以#开头的注释行.vi Dockerfile#一般而言,Dockerfile分为四部分:基础镜像信息.维护者信息.镜像操作指令和容器启动是执行的指令.模板如下: #This dockerfile uses the ubuntu image#指定基于的基础镜像,可以使用多个FROM指令,每个镜像一次#FROM <image>或FROM <im

Docker-使用Dockerfile创建镜像

Dockerfile是一个文本格式的配置文件,用户可以使用Docker来快速创建自定义的镜像 基本结构 Dockerfile由一行行命令语句组成,并且支持以#开头的注释行 一般而言,Dockerfile分为四部分:基础镜像信息.维护者信息.镜像操作指令和启动时执行指令 FROM ubuntu MAINTAINER docker_user [email protected] RUN echo "deb http://archive.ubuntu.com/ubuntu/ raring main un

Docker的镜像创建及数据管理

Docker镜像的创建 Docker镜像除了是Docker的核心技术之外也是应用发布的标准格式.一个完整的Docker镜像可以支撑一个Docker容器的运行,在Docker的整个使用过程中,进入一个已经定型的容器之后,就可以在容器中进行操作,最常见的操作就是在容器中安装应用程序,如果要把已经安装的服务进行迁移,就需要把环境以及搭建的服务生成新的镜像.镜像的生方式分为三种,分别为基于已有镜像创建.基于本地模板创建以及基于dockerfile创建. 基于已有镜像创建 基于已有镜像创建主要使用dock

Docker镜像创建及建立私有仓库

Docker镜像创建方法 创建镜像的方法有三种,分别是基于已有的镜像创建.基于本地模板创建.基于Dockerfile 创建,下面着重介绍这三种创建镜像的方法. ? 基于已有镜像创建 首先将镜像加载到容器,将容器里面运行的程序及运行环境打包起来生成新的镜像,需要记住该容器的ID号. 命令格式: docker commit [选项] 容器ID/名称 仓库名称:[标签] 常用选项: -m:说明信息 ? -a:作者信息 ? -p:生成过程中停止容器的运行 # docker create -it nick

Docker 镜像创建、私有仓库搭建和数据管理

Docker 镜像的创建方法 Docker 镜像除了是 Docker 的核心技术之外也是应用发布的标准格式.一个完整的 Docker 镜像可以支撑一个 Docker 容器的运行,在 Docker 的整个使用过程中,进入一个已经定型的容器之后,就可以在容器中进行操作,最常见的操作就是在容器中安装应用服务,如果把已经安装的服务进行迁移,就需要把环境以及搭建的服务生成新的镜像. 创建镜像的三种方法 : 基于已有的镜像创建 基于本地模板创建 基于 Dockerfile 创建 (推荐) 基于已有的镜像创建

[转]Docker基础-使用Dockerfile创建镜像

本文转自:https://www.cnblogs.com/jie-fang/p/7927643.html 1.基本结构 Dockerfile由一行行命令语句组成,并支持以#开头的注释行.例如: # This dockerfile uses the ubuntu image # VERSION 2 - EDITION 1 # Author: docker_user # Command format: Instruction [arguments / command ] .. # Base imag

使用 Dockerfile 创建镜像

简介 Dockerfile是一个文本格式的配置文件,用户可以使用Dockerfile快速创建自定义的镜像. 本文首先将介绍Dockerfile典型的基本结构及其支持的众多指令,并具体讲解通过这些指令来编写定制镜像的Dockerfile. 最后,会介绍使用Dockerfile创建镜像的过程. 基本结构 Dockerfile由一行行命令语句组成,并且支持以#开头的注释行. 一般而言,Dockerfile分为四部分:基础镜像信息.维护者信息.镜像操作指令和容器启动时执行指令.例如: # 第一行必须指定

docker常用命令、镜像命令、容器命令、数据卷,使用dockerFile创建镜像,dockefile的语法规则。

一.docker常用命令? 1. 常用帮助命令 1.1 docker的信息以及版本号 /* docker info 查看docker的信息 images2 docker本身就是一个镜像. docker version 查看docker的版本号 */ 1.2 docker的启动,停止,重启,查看状态. // service docker start/stop/restart/status 二.镜像命令? 1. 列举出所有的镜像(本地镜像) /* docker images 所拥有的参数: dock