首页
学习
活动
专区
圈层
工具
发布
社区首页 >问答首页 >Azure Kubernetes CPU多线程

问Azure Kubernetes CPU多线程
EN

Stack Overflow用户
提问于 2021-08-19 11:20:23
回答 2查看 1.2K关注 0票数 1

我希望在Azure Kubernetes中运行Spring批处理应用程序。

目前,我的内部VM有以下配置

  • CPU速度: 2,593
  • CPU核心:4

我的应用程序使用多线程(~15个线程)

如何在AKS中定义CPU。

代码语言:javascript
复制
resources:
  limits:
    cpu: "4"
  requests:
    cpu: "0.5"
args:
- -cpus
- "4"

参考: Kubernetes CPU多线程

AKS节点池:

​

EN

回答 2

Stack Overflow用户

回答已采纳

发布于 2021-08-26 11:12:46

首先,请注意Kubernetes CPU是一个绝对单位。

CPU资源的限制和请求以cpu单元来衡量。在Kubernetes中,一个cpu相当于云提供商的一个vCPU/Core,在裸金属Intel处理器上相当于一个超线程。 CPU总是被要求为绝对数量,而不是相对数量;0.1是单核、双核或48核机器上相同数量的CPU。

换句话说,CPU值1对应于在一段时间内连续地使用单个核心。

resources.requests.cpu的值为在调度过程中使用,确保单个节点上的所有请求之和小于节点容量。

创建Pod时,Kubernetes调度程序会为Pod选择要运行的节点。每个节点对于每种资源类型都有最大的容量:它可以为Pods提供的CPU和内存量。调度器确保,对于每种资源类型,调度容器的资源请求之和小于节点的容量。注意到,尽管节点上的实际内存或CPU资源使用率很低,但如果容量检查失败,调度程序仍然拒绝在节点上放置Pod。这可以防止当资源使用以后增加时节点上的资源短缺,例如,在请求速率的日峰值期间。

resources.limits.cpu的值用于确定在CPU可用的情况下可以使用多少CPU,请参阅细水雾舱是如何运行的。

spec.containers[].resources.limits.cpu被转换成它的毫升值并乘以100。结果值是容器每100 is可以使用的CPU时间总数(以微秒为单位)。在此间隔期间,容器不能使用超过其CPU时间的份额。

换句话说,请求是容器在CPU时间方面得到的保证,而限制是它可以使用的,因为它不是由其他人使用的。

多线程的概念不会改变上述情况,请求和限制适用于容器作为一个整体,无论在其中运行多少个线程。Linux调度程序根据等待时间进行调度决策,使用Cgroup来限制CPU带宽。请参阅此答案以获得详细演练:https://stackoverflow.com/a/61856689/7146596

最终回答问题

您的内置VM有4个核心,运行在2,5 GHz上,如果我们假设CPU容量是时钟速度和核数的函数,那么您目前有10 GHz“可用”。

在standard_D16ds_v4中使用的CPU的基本速度为2.5GHz,可高达3.4GHz或更短的周期根据文件

D v4和Dd v4虚拟机基于自定义的Intel Xeon白金8272 all处理器,该处理器以2.5Ghz的基速度运行,可实现最多3.4GHz的全核心涡轮频率。

在此基础上,指定4个核应该足够了,ti给了您与现场相同的容量。

然而,内核数量和时钟速度并不是全部(缓存等也会影响性能),因此要优化CPU请求和限制,您可能需要做一些测试和微调。

票数 1
EN

Stack Overflow用户

发布于 2021-08-26 14:03:37

恐怕您的问题没有简单的答案,同时为Kubernetes集群规划合适大小的VM节点池,以适当地满足资源消耗的工作负载需求。对于集群运算符来说,这是一个不断的努力,并且需要考虑到许多因素,让我们来提一下其中的几个因素:

  1. 我应该为我的Pod应用程序指定哪些服务质量(QoS)类(有保证的、可扩展的、BestEffort的),以及我计划运行多少个?
  2. 我真的知道我的应用程序VS的CPU/内存资源的实际使用情况吗?有多少VM计算资源保持空闲?(目前是否有现成的prem监控解决方案,可以证明这一点,或者可以很容易地转移到集群一中的Kubernetes ?)
  3. 我的集群是多租户环境,需要与不同的团队共享集群资源吗?
  4. 节点(VM)容量与工作负载的可用资源总量不同。

在这里,您应该考虑集群可分配的资源:

可分配=节点容量- 库贝 - 系统预留

对于AZ中的Standard_D16ds_v4 VM大小,您需要处理工作负载:14个CPU核,而不是前面假设的16个。

​

--我希望您知道,它是通过args数量的CPU指定的:

代码语言:javascript
复制
   args:
    - -cpus
    - "2"

是特定于应用程序的方法(在本例中是用go编写的“压力”实用程序),而不是每个CPU生成一个声明的线程数的一般方法。

​

我的建议:

避免将集群资源过度配置或不足配置到工作负载应用程序(所请求的资源VS.(实际使用了资源),为了优化应用程序的成本和性能,我将代替您自己对SpringBoot多线程应用程序所需的VM节点池大小和类型进行初步的大小估计,从而首先熟悉bin-packing和app right-sizing等概念。对于这最后两个主题,我不知道比GCP技术团队最近发表的更好的公共指南:

"监控gke-使用云监控实现成本优化的集群“

我鼓励你用你自己来回答你的问题。先做GKE上的概念证明(用免费审判),用自己的工作负载替换上面的演示应用程序,回到这里,分享您自己的观察,对于其他人来说,同样的任务也是有价值的!

票数 1
EN
页面原文内容由Stack Overflow提供。腾讯云小微IT领域专用引擎提供翻译支持
原文链接:

https://stackoverflow.com/questions/68846880

复制
相关文章

相似问题

领券
问题归档专栏文章快讯文章归档关键词归档开发者手册归档开发者手册 Section 归档