Kubernetes集群水平扩展——HPA(自动伸缩)

Kubernetes集群可以通过Replication Controller的scale机制完成服务的扩容或缩容,实现具有伸缩性的服务。

Kubernetes集群自动伸缩分为:


Kubernetes自动扩展主要分为:

  • 水平扩展:针对实例数目的增减;
  • 垂直扩展:也就是单个实例就可以使用的资源的增减,比如增加CPU、内存;

一、HPA简介

HPA的全称为(Horizontal Pod Autoscaling)它可以根据当前pod资源的使用率(如CPU、磁盘、内存等),进行副本数的动态的扩容与缩容,以便减轻各个pod的压力。当pod负载达到一定的阈值后,会根据扩缩容的策略生成更多新的pod来分担压力,当pod的使用比较空闲时,在稳定空闲一段时间后,还会自动减少pod的副本数量。

若要实现自动扩缩容的功能,还需要部署heapster服务,用来收集及统计资源的利用率,支持kubectl top命令,heapster服务集成在prometheus(普罗米修斯) MertricServer服务中,所以说,为了方便,我这里基于prometheus服务的环境上进行部署HPA(动态扩缩容)的服务。

可以参考博文Kubernetes的三种可视化UI界面中的第三个部署Prometheus服务,来运行prometheus服务,如果不想部署prometheus,那么可以参考github上来单独部署heapster服务

说这么多,总之就是想要使用HPA,就必须保证,可以在master节点上执行如下命令:

[[email protected] ~]# kubectl top node      #查看节点的资源使用情况
NAME     CPU(cores)   CPU%   MEMORY(bytes)   MEMORY%
master   1317m        65%    1383Mi          80%
node01   1237m        61%    1082Mi          62%
node02   1146m        57%    1045Mi          60%   

二、实现pod扩容与缩容

1)生成HPA控制器

[[email protected] ~]#  kubectl run php-apache --image=mirrorgooglecontainers/hpa-example --requests=cpu=200m --expose --port=80
#运行hpa资源,名称为php-apache,并设置请求CPU的资源为200m并暴露一个80端口
[[email protected] ~]# kubectl autoscale deployment php-apache --cpu-percent=50 --min=1 --max=10
#当hpa资源的deployment资源对象的CPU使用率达到50%时,就进行扩容,最多可以扩容到10个
[[email protected] ~]# kubectl get svc | grep php-apache    #查看php-apache对应的svc群集IP
php-apache   ClusterIP   10.97.45.108   <none>        80/TCP    44m
[[email protected] ~]#  kubectl get pod | grep php-apa    #确定当前的pod正常运行
php-apache-867f97c8cb-9mpd6   1/1     Running   0          44m

2)模拟消耗php-apache的资源,并验证pod是否会自动扩容与缩容

新开启多个终端(也可使用node节点),对php-apache的pod进行死循环请求,如下(如果你的系统资源比较充足,可以选择开启多个终端,对pod进行死循环请求,我这里开启了两个node的终端,同时请求php-apache的pod):

[[email protected] ~]# while true; do wget -q -O- 10.97.45.108; done              #一直返回ok属于正常现象
#模拟多用户对php-apache的pod造成的并发请求
[[email protected] ~]# kubectl get  hpa   #查看hpa资源对cpu的占用情况
#也可使用“-w”选项对CPU资源占用情况实时监控
NAME         REFERENCE               TARGETS    MINPODS   MAXPODS   REPLICAS   AGE
php-apache   Deployment/php-apache   416%/50%   1         10        10         56m
[[email protected] ~]#  kubectl get pod
#在运行死循环请求一段时间后,查看pod数量,当然使用-w选项对pod的变化进行实时的监控
NAME                          READY   STATUS    RESTARTS   AGE
php-apache-867f97c8cb-6jsjq   1/1     Running   0          4m9s
php-apache-867f97c8cb-7xd5x   1/1     Running   0          51s
php-apache-867f97c8cb-9mpd6   1/1     Running   0          56m
php-apache-867f97c8cb-dhng7   1/1     Running   0          3m8s
php-apache-867f97c8cb-qc9hr   1/1     Running   0          2m22s
php-apache-867f97c8cb-rj494   1/1     Running   0          3m38s
php-apache-867f97c8cb-sbn9n   1/1     Running   0          3m38s
php-apache-867f97c8cb-vzfbg   1/1     Running   0          4m9s
php-apache-867f97c8cb-vzfbg   1/1     Running   0          5m19s
php-apache-867f97c8cb-vzfbg   1/1     Running   0          3m39s
#当然最大也就只可以产生10个pod,因为我们之前规定最多产生10个pod

当停止死循环请求后,也并不会立即减少pod数量,会等一段时间后减少pod数量,防止流量再次激增。

至此,HPA实现pod副本数量的自动扩容与缩容就实现了。

———————— 本文至此结束,感谢阅读 ————————

原文地址:https://blog.51cto.com/14157628/2474360

时间: 2024-10-25 19:23:22

Kubernetes集群水平扩展——HPA(自动伸缩)的相关文章

部署Bookinfo示例程序详细过程和步骤(基于Kubernetes集群+Istio v1.0)

部署Bookinfo示例程序详细过程和步骤(基于Kubernetes集群+Istio v1.0) 部署Bookinfo示例程序 在下载的Istio安装包的samples目录中包含了示例应用程序. Bookinfo应用 部署一个样例应用,它由四个单独的微服务构成,用来演示多种 Istio 特性.这个应用模仿在线书店的一个分类,显示一本书的信息.页面上会显示一本书的描述,书籍的细节(ISBN.页数等),以及关于这本书的一些评论. Bookinfo 应用分为四个单独的微服务: productpage

安装部署Kubernetes集群实战

kubernetes概述: Kubernetes是一个开源的,用于管理云平台中多个主机上的容器化的应用,Kubernetes的目标是让部署容器化的应用简单并且高效(powerful),Kubernetes提供了应用部署,规划,更新,维护的一种机制.Kubernetes是Google 2014年创建管理的,是Google 10多年大规模容器管理技术Borg的开源版本. 通过kubernetes可以实现的功能: 快速部署应用 快速扩展应用 无缝对接新的应用功能 节省资源,优化硬件资源的使用 我们的目

CentOS7部署Kubernetes集群

CentOS7部署Kubernetes集群 简介 Kubernetes是什么? Kubernetes一个用于容器集群的自动化部署.扩容以及运维的开源平台. 通过Kubernetes,你可以快速有效地响应用户需求: a.快速而有预期地部署你的应用 b.极速地扩展你的应用 c.无缝对接新的应用功能 d.节省资源,优化硬件资源的使用 我们希望培育出一个组件及工具的生态,帮助大家减轻在公有云及私有云上运行应用的负担. Kubernetes特点: a.可移植: 支持公有云,私有云,混合云,多重云(mult

Longhorn:实现Kubernetes集群的持久化存储

Longhorn项目是Rancher Labs推出的开源的基于云和容器部署的分布式块存储新方式.Longhorn遵循微服务的原则,利用容器将小型独立组件构建为分布式块存储,并使用容器编排来协调这些组件,形成弹性分布式系统. 自2017年4月Longhorn项目发布以来,人们对在Kubernetes集群上运行Longhorn存储就产生了极大的兴趣.近日,Longhorn v0.2版本发布了,它可支持任何Kubernetes集群的持久化存储实现! Why Longhorn 如今,基于云和容器的部署规

【prometheus】kubernetes集群性能监控

手动安装方案——阿里云解决方案(部署失败): https://www.jianshu.com/p/1c7ddf18e8b2 手动安装方案—— (部署成功,但是只有CPU内存等的监控信息,没有GPU的监控信息): https://github.com/camilb/prometheus-kubernetes/tree/master helm安装方案——GPU-Monitoring-tools解决方案(部署成功): 参考:http://fly-luck.github.io/2018/12/10/gp

Gitlab CI 集成 Kubernetes 集群部署 Spring Boot 项目

在上一篇博客中,我们成功将 Gitlab CI 部署到了 Docker 中去,成功创建了 Gitlab CI Pipline 来执行 CI/CD 任务.那么这篇文章我们更进一步,将它集成到 K8s 集群中去.这个才是我们最终的目标.众所周知,k8s 是目前最火的容器编排项目,很多公司都使用它来构建和管理自己容器集群,可以用来做机器学习训练以及 DevOps 等一系列的事情. 在这里,我们聚焦 CI/CD,针对于 Spring Boot 项目,借助 Gitlab CI 完成流水线的任务配置,最终部

Centos7 下安装入门级别的kubernetes集群

前情说明: 三台Centos7系统的虚拟机(1个master+2个node),三台机器上的防火墙,SELINUX全部关掉.我的实验坏境可以上网,默认的YUM源就可以用. 1.什么是kubernetes Kubernetes(k8s)是Google开源的容器集群管理系统(谷歌内部:Borg).在Docker技术的基础上,为容器化的应用提供部署运行.资源调度.服务发现和动态伸缩等一系列完整功能,提高了大规模容器集群管理的便捷性. Kubernetes优势: - 容器编排         - 轻量级

在kubernetes 集群运行 odoo

kubernetes 可以自动运行多个 odoo服务的副本,因此 非常适用用来做高可用的odoo部署, 在本例中,odoo服务运行在 kubernetes 集群中, 而 postgreSQL 数据库 则 另外运行在 集群宿主主机网络的另外一台主机上 安装kubernetes 集群,方法有很多种,截止到目前,最容易的是 用kubeadm安装, 安装的 步骤参考 http://www.cnblogs.com/odoouse/p/6877766.html 本文主要说明 如何部署 odoo? 要部署一个

Traefik实现Kubernetes集群服务外部https访问

1.部署 Traefik 由于我们需要将外部对于kubernetes的http请求全都转换成https,不想更改服务的配置以及代码,那我们可以选择在traefik上配置域名证书,这样通过域名对服务的访问将会自动转换成https请求. 1.1创建ClusterRole以及ClusterRoleBinding(Kubernetes1.6+) ingress-rbac.yaml文件: apiVersion: v1 kind: ServiceAccount metadata:   name: ingre