Kubernetes亲和性学习笔记

农民  金牌会员 | 2023-7-20 07:36:39 | 显示全部楼层 | 阅读模式
打印 上一主题 下一主题

主题 907|帖子 907|积分 2721

欢迎访问我的GitHub

这里分类和汇总了欣宸的全部原创(含配套源码):https://github.com/zq2599/blog_demos
本篇概览


  • 本文是欣宸在学习Kubernetes调度器的过程中,对亲和性相关知识点的整理和总结,这是一篇笔记性质的博客
kubernetes默认调度器的调度过程:


  • 调度过程如下:

  • 预选(Predicates)
  • 优选(Priorities)
  • 选定(Select)
亲和性一览


  • 这里将亲和性先分类,便于理解
graph LRA(亲和性)-->B1(节点亲和性);A-->B2(Pod亲和性);B1-->C1(硬亲和性-required);B1-->C2(软亲和性-preferred);B2-->C3(硬亲和性-required);B2-->C4(软亲和性-preferred);B2-->C5(反亲和性);节点亲和性和pod亲和性的区别


  • 举个例子,假设给小明分配班级(小明是pod,班级是节点)

  • 节点亲和性:直接告诉小明,你去一年级
  • pod亲和性:从小朋友中找出和小明同年的,找到了小张,发现小张是一年级的,于是让小明去一年级
节点亲和性:硬亲和性


  • requiredDuringSchedulinglgnoredDuringExecution:用于定义节点硬亲和性
  • nodeSelectorTerm:节点选择器,可以有多个,之间的关系是逻辑或,即一个nodeSelectorTerm满足即可
  • matchExpressions:匹配规则定义,多个之间的关系是逻辑与,即同一个nodeSelectorTerm下所有matchExpressions定义的规则都匹配,才算匹配成功
  • 示例:
  1. apiVersion: v1
  2. kind: Pod
  3. metadata:
  4.   name: with-required-nodeaffinity
  5. spec:
  6.   affinity:
  7.     nodeAffinity:
  8.       requiredDuringSchedulingIgnoredDuringExecution:
  9.         nodeSelectorTerms:
  10.         - matchExpressions:
  11.           - {key: zone, operator: In, values: ["foo"]}
  12.   containers:
  13.   - name: nginx
  14.     image: nginx
复制代码

  • 功能与nodeSelector类似,用的是匹配表达式,可以被理解为新一代节点选择器
  • 不满足硬亲和性条件时,pod为Pending状态
  • 在预选阶段,节点硬亲和性被用于预选策略MatchNodeSelector
节点亲和性:软亲和性


  • 特点:条件不满足时也能被调度
  • 示例:
  1. apiVersion: apps/v1
  2. kind: Deployment
  3. metadata:
  4.   name: myapp-deploy-with-node-affinity
  5. spec:
  6.   replicas: 3
  7.   selector:
  8.     matchLabels:
  9.       app: nginx
  10.   template:
  11.     metadata:
  12.       name: nginx
  13.       labels:
  14.         app: nginx
  15.     spec:
  16.       affinity:
  17.         nodeAffinity:
  18.           preferredDuringSchedulingIgnoredDuringExecution:
  19.           - weight: 60
  20.             preference:
  21.               matchExpressions:
  22.               - {key: zone, operator: In, values: ["foo"]}
  23.           - weight: 30
  24.             preference:
  25.               matchExpressions:
  26.               - {key: ssd, operator: Exists, values: []}
  27.       containers:
  28.       - name: nginx
  29.         image: nginx
复制代码

  • 集群中的节点,由于标签不同,导致的优先级结果如下:


  • 在优选阶段,节点软亲和性被用于优选函数NodeAffinityPriority
  • 注意:NodeAffinityPriority并非决定性因素,因为优选阶段还会调用其他优选函数,例如SelectorSpreadPriority(将pod分散到不同节点以分散节点故障导致的风险)
  • pod副本数增加时,分布的比率会参考节点亲和性的权重
Pod亲和性(podAffinity)


  • 如果需求是:新增的pod要和已经存在pod(假设是A)在同一node上,此时用节点亲和性是无法完成的,因为A可能和节点没啥关系(可能是随机调度的),此时只能用pod亲和性来实现
  • pod亲和性:一个pod与已经存在的某个pod的亲和关系,需要通过举例来说明

  • 创建一个deployment,这个pod有标签app=tomcat
  1. kubectl run tomcat -l app=tomcat --image tomcat:alpine
复制代码

  • 创建pod,需求是和前面的pod在一起,使用pod亲和性来实现:
  1. apiVersion: v1
  2. kind: Pod
  3. metadata:
  4.   name: with-pod-affinity-1
  5. spec:
  6.   affinity:
  7.     podAffinity:
  8.       requiredDuringSchedulingIgnoredDuringExecution:
  9.       - labelSelector:
  10.           matchExpressions:
  11.           - {key: app, operator: In, values: ["tomcat"]}
  12.         topologyKey: kubernetes.io/hostname
  13.   containers:
  14.   - name: nginx
  15.     image: nginx
复制代码

  • 调度逻辑:
graph TDA[1. 用matchExpressions的规则app=tomcat搜索] -->B(2. 找到tomcat的pod,也就确定了该pod的节点,假设是A节点)B --> C(3. topologyKey是kubernetes.io/hostname,所以去找A节点kubernetes.io/hostname标签的值,假设是xxx)C --> D(4. 将新的pod调度到kubernetes.io/hostname=xxx的节点)

  • 表面上看,最终只是根据hostname去调度的,但如果topologyKey的值是多个节点所拥有的,就更有通用性了,如下图,topologyKey等于filure-domain.beta.kubernetes.io/zone:


  • 硬亲和:requiredDuringSchedulingIgnoredDuringExecution
  • 软亲和:preferredDuringSchedulingIgnoredDuringExecution
Pod反亲和(podAntiAffinity)


  • 与亲和性相反,将当前pod调度到满足匹配条件之外的节点上
  • 适用场景:

  • 分散同一类应用
  • 将不同安全级别的pod调度至不同节点


  • 示例如下,匹配表达式和自身标签一致,作用是分散同一类应用,让相同pod不要调度到同一个节点:
  1. apiVersion: apps/v1
  2. kind: Deployment
  3. metadata:
  4.   name: myapp-with-pod-anti-affinity
  5. spec:
  6.   replicas: 4
  7.   selector:
  8.     matchLabels:
  9.       app: myapp
  10.   template:
  11.     metadata:
  12.       name: myapp
  13.       labels:
  14.         app: myapp
  15.     spec:
  16.       affinity:
  17.         podAntiAffinity:
  18.           requiredDuringSchedulingIgnoredDuringExecution:
  19.           - labelSelector:
  20.               matchExpressions:
  21.               - {key: app, operator: In, values: ["myapp"]}
  22.             topologyKey: kubernetes.io/hostname
  23.       containers:
  24.       - name: nginx
  25.         image: nginx
复制代码

  • 如果集群中只有三个节点,那么执行上述yaml的结果就是最多创建三个pod,另一个始终处于pending状态
参考

欢迎关注博客园:程序员欣宸

学习路上,你不孤单,欣宸原创一路相伴...

免责声明:如果侵犯了您的权益,请联系站长,我们会及时删除侵权内容,谢谢合作!

本帖子中包含更多资源

您需要 登录 才可以下载或查看,没有账号?立即注册

x
回复

使用道具 举报

0 个回复

倒序浏览

快速回复

您需要登录后才可以回帖 登录 or 立即注册

本版积分规则

农民

金牌会员
这个人很懒什么都没写!

标签云

快速回复 返回顶部 返回列表