基于docker搭建Jenkins+Gitlab+Harbor+Rancher架构实现CI/CD操作

一、各个组件的功能描述:

Docker 是一个开源的应用容器引擎。

Jenkis 是一个开源自动化服务器。

(1).负责监控gitlab代码、gitlab中配置文件的变动;

(2).负责执行镜像文件的构建、上传与下载;

(3).通过Rancher插件系统构建stack/service;

GitLab: 是一个用于仓库管理系统的开源项目,使用Git作为代码管理工具。

(1).保存项目配置文件;

(2).nginx定制配置文件;

(3).Dockerfile文件;

Harbor:开源的docker镜像仓库管理系统,比较方便管理维护镜像。

(1)负责构建后镜像的存储

rancher:容器编排管理工具。

(1)通过API负责接受jenkins的调用,自动创建、更新stack/service;

(2)实现服务的扩容缩容

二、流程导图说明:

① 开发人员提交代码提交到gitlab

②gitlab钩子会触发jenkins执行下载对应项目的env、nginx配置文件、Dockerfile和最新版本的代码

③jenkins执行shell脚本:composer安装laravel插件和npm安装模块,编译生成js文件。完好的代码通过docker build Dockerfile 指令打包成镜像

④上传构建好的镜像push到harbor镜像仓库

⑤jenkins借助Rancher的插件通过API与rancher交互更新service达到更升级容器的目的(也就是更新代码版本),其中pull镜像的这一步会通过saltstack并行从harbor上下拉之前构建好的镜像到多个主机上

以上流程完整的实现了CI\CD,这里主要是jenkins部分是关键位置之一。

三、从零开始搭建

1.首先检查虚拟机的版本(centos7,内核3.10及以上)

 2.安装JDK1.8

3.确保yum 包更新到最新(截图就不发了...更新包比较多)

yum -y update(可能需要点时间去更新)

systemctl disable firewalld.service(永远关闭防火墙)

 以上内容最好安装在原始机器上面(专门准备一台虚拟机安装JDK插件,然后其他的安装通过克隆,然后在进行安装)

四、安装docker容器(对以上操作的集群克隆一台,需要MAC地址)

(1).卸载

旧版本:

yum remove docker docker-common docker-selinux docker-engine

(2).安装需要的软件包, yum-util 提供yum-config-manager功能,另外两个是devicemapper驱动依赖的

yum install -y yum-utils device-mapper-persistent-data lvm2

(3).设置yum源

yum -y install yum-utils、

yum-config-manager --add-repo https://download.docker.com/linux/centos/docker-ce.repo

(4).查看可用的所有仓库中所有docker版本

yum list docker-ce --showduplicates | sort -r

(5).安装docker

sudo yum install -y docker-ce

(7).设置开机并加入开机自启动

systemctl start docker

systemctl enable docker

(8).查看docker的版本(检查是否安装成功,以及相关的版本)

          docker version(表明docker安装成功)

(9). 安装docker-compose

 五、安装gitlab(代码管理器)---使用docker进行安装

  (1).下载镜像文件

docker pull beginor/gitlab-ce:11.0.1-ce.0

(2).创建etc、log、data目录,便于日后升级

     mkdir -p /mnt/gitlab/etc

     mkdir -p /mnt/gitlab/log

     mkdir -p /mnt/gitlab/data

(3).运行gitlab容器

docker run \

    --detach \

    --publish 8443:443 \

    --publish 8090:80 \

    --name gitlab \

    --restart always \

    -v /mnt/gitlab/etc:/etc/gitlab \

    -v /mnt/gitlab/log:/var/log/gitlab \

    -v /mnt/gitlab/data:/var/opt/gitlab \

    beginor/gitlab-ce:11.0.1-ce.0 

。。。。。。。。时间关系未完待续........以上情况,亲自安装步骤并实现....

原文地址:https://www.cnblogs.com/lq-93/p/11824039.html

时间: 2024-08-01 10:42:29

基于docker搭建Jenkins+Gitlab+Harbor+Rancher架构实现CI/CD操作的相关文章

基于Jenkins+Gitlab+Harbor+Rancher架构的CICD实现

在讲正文开始前先回顾一下以往传统的代码部署方式. 通常运维人员在接到代码(新项目)上线的任务前都要做大量的准备工作,包括:物理主机.虚拟机.代码运行环境.数据库安装配置.各种帐号创建,.运行后期的系统监控.应用的日志收集,性能优化等一系列的工作. 想一想这个流程不是很复杂,但是很繁琐,效率低下,如需要调试还需要给开发人员提供线上系统权限等等,细节没有注意的话,还会造成解决问题的难度等各种问题. OK,说完以上的问题,那接下来就有相对应的解决方案. 在经过两个月的不间断的测试下,一套我自认为比较好

Jenkins+GitLab+Sonarqube+Shell持续集成CI/CD

1.部署GitLab [[email protected] ~]# wget https://mirrors.tuna.tsinghua.edu.cn/gitlab-ce/yum/el7/gitlab-ce-12.0.3-ce.0.el7.x86_64.rpm [[email protected] ~]# yum localinstall -y gitlab-ce-12.0.3-ce.0.el7.x86_64.rpm [[email protected] ~]# vim /etc/gitlab/

基于Docker搭建大数据集群(六)Hive搭建

基于Docker搭建大数据集群(六)Hive搭建 前言 之前搭建的都是1.x版本,这次搭建的是hive3.1.2版本的..还是有一点细节不一样的 Hive现在解析引擎可以选择spark,我是用spark做解析引擎的,存储还是用的HDFS 我是在docker里面搭建的集群,所以都是基于docker操作的 一.安装包准备 Hive官网下载 微云下载 | 在 tar 目录下 二.版本兼容 我使用的相关软件版本 Hadoop ~ 2.7.7 Spark ~ 2.4.4 JDK ~ 1.8.0_221 S

基于Docker搭建分布式消息队列Kafka

本文基于Docker搭建一套单节点的Kafka消息队列,Kafka依赖Zookeeper为其管理集群信息,虽然本例不涉及集群,但是该有的组件都还是会有,典型的kafka分布式架构如下图所示.本例搭建的示例包含Zookeeper + Kafka + Kafka-manger #获取镜像 ·         zookeeper镜像:zookeeper:3.4.9 ·         kafka镜像:wurstmeister/kafka:0.10.2.0 ·         kafka-manager

【转载】基于Docker的CaaS容器云平台架构设计及市场分析

[转自]http://www.cnblogs.com/darkprince/p/5115739.html 基于Docker的CaaS容器云平台架构设计及市场分析 ---转载请注明出处,多谢!--- 1 项目背景---概述: “在移动互联网时代,企业需要寻找新的软件交付流程和IT架构,从而实现架构平台化,交付持续化,业务服务化. 容器将成为新一代应用的标准交付件,容器云将帮助企业用户构建研发流程和云平台基础设施.缩短应用向云端交付的周期,降低运营门槛.加速企业向互联网技术和业务的双转型. 容器云将

基于Docker搭建ActiveMQ的高可用集群

最近刚开始玩Docker和ActiveMQ刚好学习到ActiveMQ集群的搭建,就将其记录了下来给有需要的人,也可以跟大家交流交流. 这里先感谢慕课网和http://blog.csdn.net/lifetragedy/article/details/51869032,在学习ActiveMQ有很大的帮助. 一.docker坏境的搭建. 这里重点不是docker,而是基于docker搭建的ActiveMQ集群,docker了解的也可以参考http://www.docker.org.cn/.     

【原创】基于Docker的CaaS容器云平台架构设计及市场分析

基于Docker的CaaS容器云平台架构设计及市场分析 ---转载请注明出处,多谢!--- 1 项目背景---概述: “在移动互联网时代,企业需要寻找新的软件交付流程和IT架构,从而实现架构平台化,交付持续化,业务服务化. 容器将成为新一代应用的标准交付件,容器云将帮助企业用户构建研发流程和云平台基础设施.缩短应用向云端交付的周期,降低运营门槛.加速企业向互联网技术和业务的双转型. 容器云将对接各类代码托管库,实现自动化持续集成和DOCKER镜像构建,为新一代应用交付和开发运维一体化奠定了基础.

基于Docker搭建大数据集群(七)Hbase部署

基于Docker搭建大数据集群(七)Hbase搭建 一.安装包准备 Hbase官网下载 微云下载 | 在 tar 目录下 二.版本兼容 三.角色分配 节点 Master Regionserver cluster-master yes no cluster-slave1 backup yes cluster-slave2 no yes cluster-slave3 no yes 四.配置修改 hbase-env.sh export JAVA_HOME=/opt/jdk/jdk1.8.0_221 h

基于Docker搭建大数据集群(一)Docker环境部署

本篇文章是基于Docker搭建大数据集群系列的开篇之作 主要内容 docker搭建 docker部署CentOS 容器免密钥通信 容器保存成镜像 docker镜像发布 环境 Linux 7.6 一.Docker安装 安装工具包 bash yum install -y yum-utils #安装工具包,缺少这些依赖将无法完成 设置远程仓库 bash yum-config-manager --add-repo https://download.docker.com/linux/centos/dock