K8S：HPA pod水平自动伸缩

文章目录

  • 一.HPA概念
    • 1.什么是HPA
    • 2.HPA原理
  • 二.部署 metrics-server
    • 1.node节点上传镜像包
    • 2.master节点安装metrics-server
  • 三.部署 HPA
    • 1.所有节点安装镜像
    • 2.master创建测试的 Pod 资源
    • 3.创建 HPA 控制器
    • 4.创建测试客户端容器
    • 5.弹性缩容
  • 四.扩展
    • 1.资源限制 - Pod
      • ①资源限制的原理
      • ②格式示例
    • 2.资源限制 - 命名空间
      • ①计算资源配额
      • ②配置对象数量配额限制
    • 3.单独对某个资源进行限制（Container、Pod、PVC）
  • 总
    • 1.HPA
      • ①概念
      • ②原理
    • 2.k8s 资源限制

一.HPA概念

1.什么是HPA

HPA（Horizontal Pod Autoscaling）Pod 水平自动伸缩，Kubernetes 有一个 HPA 的资源，HPA 可以根据 CPU 利用率自动伸缩一个 Replication Controller、Deployment 或者Replica Set 中的 Pod 数量。

2.HPA原理

（1）HPA 基于 Master 上的 kube-controller-manager 服务启动参数 horizontal-pod-autoscaler-sync-period 定义的时长（默认为30秒），周期性的检测 Pod 的 CPU 使用率。

（2）HPA 与之前的 RC、Deployment 一样，也属于一种 Kubernetes 资源对象。通过追踪分析 RC 控制的所有目标 Pod 的负载变化情况，来确定是否需要针对性地调整目标Pod的副本数，这是HPA的实现原理。

（3）metrics-server 也需要部署到集群中， 它可以通过 resource metrics API 对外提供度量数据。

二.部署 metrics-server

●metrics-server：是kubernetes集群资源使用情况的聚合器，收集数据给kubernetes集群内使用，如kubectl、hpa、scheduler等。

1.node节点上传镜像包

//在所有 Node 节点上传 metrics-server.tar 镜像包到 /opt 目录
cd /opt/
docker load -i metrics-server.tar

2.master节点安装metrics-server

//使用 helm install 安装 metrics-server
mkdir /opt/metrics
cd /opt/metrics

helm repo remove stablehelm repo add stable https://charts.helm.sh/stable
或
helm repo add stable http://mirror.azure.cn/kubernetes/charts

helm repo update

helm pull stable/metrics-server

vim metrics-server.yaml
args:
- --logtostderr
- --kubelet-insecure-tls
- --kubelet-preferred-address-types=InternalIP
image:repository: k8s.gcr.io/metrics-server-amd64tag: v0.3.2

//使用 helm install 安装 metrics-server
helm install metrics-server stable/metrics-server -n kube-system -f metrics-server.yaml

kubectl get pods -n kube-system | grep metrics-server

外链图片转存失败,源站可能有防盗链机制,建议将图片保存下来直接上传

#需要多等一会儿
kubectl top node

外链图片转存失败,源站可能有防盗链机制,建议将图片保存下来直接上传

kubectl top pods --all-namespaces

外链图片转存失败,源站可能有防盗链机制,建议将图片保存下来直接上传

三.部署 HPA

1.所有节点安装镜像

//在所有节点上传 hpa-example.tar 镜像文件到 /opt 目录
hpa-example.tar 是谷歌基于 PHP 语言开发的用于测试 HPA 的镜像，其中包含了一些可以运行 CPU 密集计算任务的代码。cd /opt
docker load -i hpa-example.tardocker images | grep hpa-examplegcr.io/google_containers/hpa-example                              latest                          4ca4c13a6d7c   7 years ago    481MB

外链图片转存失败,源站可能有防盗链机制,建议将图片保存下来直接上传

外链图片转存失败,源站可能有防盗链机制,建议将图片保存下来直接上传

外链图片转存失败,源站可能有防盗链机制,建议将图片保存下来直接上传

2.master创建测试的 Pod 资源

//创建用于测试的 Pod 资源，并设置请求资源为 cpu=200m
mkdir /opt/HPA
cd /opt/HPA
vim hpa-pod.yamlapiVersion: apps/v1
kind: Deployment
metadata:labels:run: php-apachename: php-apache
spec:replicas: 1selector:matchLabels:run: php-apachetemplate:metadata:labels:run: php-apachespec:containers:- image: gcr.io/google_containers/hpa-examplename: php-apacheimagePullPolicy: IfNotPresentports:- containerPort: 80resources:requests:cpu: 200m
---
apiVersion: v1
kind: Service
metadata:name: php-apache
spec:ports:- port: 80protocol: TCPtargetPort: 80selector:run: php-apache

kubectl apply -f hpa-pod.yaml

kubectl get pods
NAME                          READY   STATUS    RESTARTS   AGE
php-apache-6c64bcf88b-n5fhc               1/1     Running             0          6s

3.创建 HPA 控制器

//使用 kubectl autoscale 命令创建 HPA 控制器，设置 cpu 负载阈值为请求资源的 50%，指定最少负载节点数量为 1 个，最大负载节点数量为 10 个
kubectl autoscale deployment php-apache --cpu-percent=50 --min=1 --max=10

//需要等一会儿，才能获取到指标信息 TARGETS
kubectl get hpaNAME         REFERENCE               TARGETS   MINPODS   MAXPODS   REPLICAS   AGE
php-apache   Deployment/php-apache   0%/50%    1         10        1          70m

外链图片转存失败,源站可能有防盗链机制,建议将图片保存下来直接上传

kubectl top podsNAME                                CPU(cores)   MEMORY(bytes) 
php-apache-6c64bcf88b-n5fhc         1m           6Mi

4.创建测试客户端容器

//创建一个测试客户端容器
kubectl run -it load-generator --image=busybox /bin/sh//增加之前提前再开一个终端，实施查看负载效果
kubectl get hpa -w//增加之前提前再另开一个终端，实施查看pod创建效果
kubectl get pod |grep php-apache

//增加负载,（弹性扩容）
# while true; do wget -q -O- http://php-apache.default.svc.cluster.local; done

外链图片转存失败,源站可能有防盗链机制,建议将图片保存下来直接上传

#查看负载节点数目kubectl get hpa -w
NAME         REFERENCE               TARGETS   MINPODS   MAXPODS   REPLICAS   AGE
php-apache   Deployment/php-apache   0%/50%    1         10        1          87m
php-apache   Deployment/php-apache   196%/50%   1         10        1          89m
php-apache   Deployment/php-apache   196%/50%   1         10        4          89m
php-apache   Deployment/php-apache   122%/50%   1         10        4          90m
php-apache   Deployment/php-apache   122%/50%   1         10        8          90m
php-apache   Deployment/php-apache   122%/50%   1         10        10         90m
php-apache   Deployment/php-apache   49%/50%    1         10        10         91m
php-apache   Deployment/php-apache   48%/50%    1         10        10         93m#以上可以看到经过压测，负载节点数量最大上升到 10 个，并且 cpu 负载也随之下降。

#查看 Pod 状态，也发现已经创建了 10 个 Pod 资源
kubectl get pod |grep php-apache
kubectl get pod |grep php-apache|wc -l

外链图片转存失败,源站可能有防盗链机制,建议将图片保存下来直接上传

#HPA 扩容的时候，负载节点数量上升速度会比较快；但回收的时候，负载节点数量下降速度会比较慢。
原因是防止在业务高峰期时因为网络波动等原因的场景下，如果回收策略比较积极的话，K8S集群可能会认为访问流量变小而快速收缩负载节点数量，而仅剩的负载节点又承受不了高负载的压力导致崩溃，从而影响业务。

#查看node节点的状态
kubectl top node

外链图片转存失败,源站可能有防盗链机制,建议将图片保存下来直接上传

//如果 cpu 性能较好导致负载节点上升不到 10 个，可再创建一个测试客户端同时测试：
kubectl run -i --tty load-generator1 --image=busybox /bin/sh
# while true; do wget -q -O- http://php-apache.default.svc.cluster.local; done

5.弹性缩容

#结束增加负载之后，pod的数量会逐渐缩减为一个
kubectl get hpa -w
kubectl get pod |grep php-apache

外链图片转存失败,源站可能有防盗链机制,建议将图片保存下来直接上传

外链图片转存失败,源站可能有防盗链机制,建议将图片保存下来直接上传

外链图片转存失败,源站可能有防盗链机制,建议将图片保存下来直接上传

四.扩展

1.资源限制 - Pod

①资源限制的原理

Kubernetes对资源的限制实际上是通过cgroup来控制的，cgroup是容器的一组用来控制内核如何运行进程的相关属性集合。针对内存、CPU 和各种设备都有对应的 cgroup。
默认情况下，Pod 运行没有 CPU 和内存的限额。这意味着系统中的任何 Pod 将能够像执行该 Pod 所在的节点一样， 消耗足够多的 CPU 和内存。一般会针对某些应用的 pod 资源进行资源限制，这个资源限制是通过 resources 的 requests 和 limits 来实现。requests 为创建 Pod 时初始要分配的资源，limits 为 Pod 最高请求的资源值。

②格式示例

spec:containers:- image: xxxximagePullPolicy: IfNotPresentname: authports:- containerPort: 8080protocol: TCPresources:limits:cpu: "2"memory: 1Girequests:cpu: 250mmemory: 250Mi

2.资源限制 - 命名空间

①计算资源配额

apiVersion: v1
kind: ResourceQuota        #使用 ResourceQuota 资源类型
metadata:name: compute-resourcesnamespace: spark-cluster  #指定命令空间
spec:hard:pods: "20"    #设置 Pod 数量最大值requests.cpu: "2"requests.memory: 1Gilimits.cpu: "4"limits.memory: 2Gi

②配置对象数量配额限制

apiVersion: v1
kind: ResourceQuota
metadata:name: object-countsnamespace: spark-cluster
spec:hard:configmaps: "10"persistentvolumeclaims: "4"		#设置 pvc 数量最大值replicationcontrollers: "20"    #设置 rc 数量最大值secrets: "10"services: "10"services.loadbalancers: "2"

#如果Pod没有设置requests和limits，则会使用当前命名空间的最大资源；如果命名空间也没设置，则会使用集群的最大资源。
K8S 会根据 limits 限制 Pod 使用资源，当内存超过 limits 时 cgruops 会触发 OOM。

3.单独对某个资源进行限制（Container、Pod、PVC）

这里就需要创建 LimitRange 资源来设置 Pod 或其中的 Container 能够使用资源的最大默认值
apiVersion: v1
kind: LimitRange     #使用 LimitRange 资源类型
metadata:name: mem-limit-rangenamespace: test    #可以给指定的 namespace 增加一个资源限制
spec:limits:- default:         #default 即 limit 的值memory: 512Micpu: 500m     defaultRequest:   #defaultRequest 即 request 的值memory: 256Micpu: 100mtype: Container  #类型支持 Container、Pod、PVC

总

1.HPA

①概念

为控制器管理的pod 资源的副本数量实现自动伸缩

②原理

追踪控制器管理的Pod 的负载情况， 来根据设置的阀值动态的调整Pod的副本数量

metrics-server 收集k8s中的node、pod等资源的使用情况 kubectl top node/pod

kubectl autoscale 控制器 --cpu-percent --min --maX

2.k8s 资源限制

resource ,requests/limits——限制pod 中的容器的资源量

ResourceQuota——资源类型命名空间中的资源对象或者资源量进行配额限制

LimitRanger——资源类型设置命名空间中的 Pod/容器的默认的

limits/requests——资源量的限制

本文来自互联网用户投稿，该文观点仅代表作者本人，不代表本站立场。本站仅提供信息存储空间服务，不拥有所有权，不承担相关法律责任。如若转载，请注明出处：http://www.hqwc.cn/news/132300.html

如若内容造成侵权/违法违规/事实不符，请联系编程知识网进行投诉反馈email:809451989@qq.com，一经查实，立即删除！

相关文章

干货｜小白也能自制电子相册赶紧码住~

干货｜小白也能自制电子相册赶紧码住~

你是否想拥有一个独一无二的电子相册，却又苦于不知道如何下手？今天教你一个简单的方法，即使你是小白，也能轻松自制电子相册！ 一、选择合适的工具 首先，你需要选择一个合适的工具来制作电子相册。有很多工具…
阅读更多...
ubuntu20.04 nerf Instant-ngp

ubuntu20.04 nerf Instant-ngp

Instant-ngp linux ubuntu 20.04 GPU RTX3050Ti Instant-ngp官方文档地址 https://github.com/NVlabs/instant-ngp 参考链接Instant-ngp linux部署及使用 - 简书 Ubuntu20.04复现instant-ngp，自建数据集，导出mesh_XINYU W的博客-CSDN博客 步骤 安装基…
阅读更多...
数据库基础（一）

数据库基础（一）

数据库面试基础 注，本文章内容主要来自于JAVAGUIDE，只是结合网上资料和自己的知识缺陷进行一点补充，需要准备面试的请访问官方网址。 一、范式 参考链接 函数依赖：一张表中，确定X则必定能确定Y，则X->…
阅读更多...
[GXYCTF2019]Ping Ping Ping - RCE(空格、关键字绕过[3种方式])

[GXYCTF2019]Ping Ping Ping - RCE(空格、关键字绕过[3种方式])

[GXYCTF2019]Ping Ping Ping 1 解题流程1.1 小试牛刀1.2 三种解法1.2.1 解法一：变量定义拼接绕过1.2.2 解法二：base64编码绕过1.2.3 解法三：内联执行绕过2 思考总结1 解题流程 1.1 小试牛刀 1、提示?ip，结合题目名称，我们直接输入?ip=127.0.0.1 PING 127.0.0.1 (127.…
阅读更多...
【Spring AOP】统一用户登录校验

【Spring AOP】统一用户登录校验

统一用户登录校验 一. 使用拦截器实现统一用户登录校验1. 自定义拦截器2. 将拦截器加入到系统配置 二. 拦截器实现原理三. 扩展：统一访问前缀添加 一. 使用拦截器实现统一用户登录校验 Spring 中提供了具体的实现拦截器：HandlerInterceptor，…
阅读更多...
数据结构学习笔记——数据结构概论

数据结构学习笔记——数据结构概论

目录 一、数据与数据元素二、数据类型和抽象数据类型三、数据结构的定义（一）逻辑结构（二）存储结构（物理结构）1、顺序存储结构2、链式存储结构3、索引存储结构4、散列存储结构 （三）数…
阅读更多...
基于Cl2/BCl3电感偶联等离子体的氮化镓干蚀特性

基于Cl2/BCl3电感偶联等离子体的氮化镓干蚀特性

引言 氮化镓(GaN)具有六方纤锌矿结构，直接带隙约为3.4eV，目前已成为实现蓝光发光二极管(led)的主导材料。由于GaN的高化学稳定性，在室温下用湿法化学蚀刻来蚀刻或图案化GaN是非常困难的。与湿法蚀刻技术相比，干法蚀刻技术可以提供…
阅读更多...
【计算机网络】——前言计算机网络发展的历程概述

【计算机网络】——前言计算机网络发展的历程概述

主页点击直达：个人主页 我的小仓库：代码仓库 C语言偷着笑：C语言专栏 数据结构挨打小记：初阶数据结构专栏 Linux被操作记：Linux专栏 LeetCode刷题掉发记：LeetCode刷题 算法：算法专栏 C头…
阅读更多...
wins打开ftp服务，跳转到浏览器解决方式

wins打开ftp服务，跳转到浏览器解决方式

问题: 在wins的资源管理器中输入 ftp://服务器ip的时候，会突然跳转到浏览器中 百度上的方法归纳汇总 解决方法: 百度上最多的方式，但是我电脑试了不行 启动 InternetExplorer 在 菜单栏 选择 工具 -> Internet 选项 -> 高级 -> 勾选 启用 …
阅读更多...
如何查找文献，如何阅读文献

如何查找文献，如何阅读文献

一、高效查找需要阅读的文献 1、首先进入知网的高级检索页，点击“学术期刊”，你会看到“来源类别”选择，在这个里选择北核和C刊 2、在检索结果页选择一篇自己感兴趣的文章，点击篇名进入文章详情页，下拉可看到核心文献…
阅读更多...
游戏设计模式专栏(八）：Cocos中最常见的设计模式之一

游戏设计模式专栏(八）：Cocos中最常见的设计模式之一

点击上方亿元程序员关注和★星标 引言 大家好，我是亿元程序员，一位有着8年游戏行业经验的主程。 本系列是《和8年游戏主程一起学习设计模式》，让糟糕的代码在潜移默化中升华，欢迎大家关注分享收藏订阅。 组合模式是一种在Cocos…
阅读更多...
PreScan与MATLAB联合仿真报错

PreScan与MATLAB联合仿真报错

一、 问题： Error:Matlab ||和&&运算符的操作数必须能够转换为逻辑标量值 二、解决办法 必须安装VS2013（我装的VS2017不行的），然后重启prescan和MATLAB，编译通过，界面如下： 三、VS…
阅读更多...
推荐文章
最新文章

Copyright @ 2022~2023