什么是 ALB
- 全称 Application Load Balancer,是 AWS Elastic Load Balancing 中的一款产品
- Application Load Balancer 最适合 HTTP 和 HTTPS 流量的负载均衡
- 详细功能
什么是 EKS
- Amazon Elastic Kubernetes Service (Amazon EKS) 是一项托管服务,可用于在 上运行 AWS Kubernetes,而无需安装、操作和维护您自己的 Kubernetes 控制层面或节点
- 默认 k8s master 是在 aws 托管 VPC 内对用户不可见,只暴露了 API 接口,与用户所在 node VPC 需要通过 两个 ENI 接口进行通讯
如何结合
- 需要引入一个 aws-load-balancer-controller
-
v2.0.0 版本开始 AWS ALB Ingress Controller 正式更名为 AWS LoadBalancer Controller 并 GA!(Our first GA release for AWS Load Balancer Controller ❤️ (aka. AWS ALB Ingress Controller v2))
- 再次证明了,AWS 生态的完善。此插件基本上就是官方放出来让社区自己来完善并不断迭代
- v2 版本开始,不单单只是一个 alb 的控制器了,添加了 nlb 的控制,至此可以同时支持 4 & 7 层
- controller 监听 k8s api server,其实是 watch ingress 的变化,当发现有变更,调用 aws api 触发 alb rule 变化,同时把一个 ingress 的 annotations 配置添加到 alb 中
- 依靠 ALB 本身就有的权重能力,配合 ingress annotations 配置多个 group + order(
alb.ingress.kubernetes.io/group.name
& alb.ingress.kubernetes.io/group.order
)来实现单 k8s 的蓝绿部署
-
How it works
注意点
- Rules per load balancer (not counting default rules) :100
- CD 系统适配
- 无多 K8S 集群能力
- 其他(发掘中。。。)
想象力
- 其实这个东西就差最后一步即可实现多 K8S 集群的流量调度,本身 ALB 就有这个能力做这个事情,毕竟其实就是 Nginx
- 比如可以基于 ALB 的 TargetGroup 将不同的 K8S 的 Node 放入,接着依赖 ALB 的权重能力来实现多集群调度流量,这个需求其实还是存在的,单集群的 K8S 其实当有重大升级操作 Or 其他特殊原因的事情很容易一把全挂的情况发生
- 慢慢读代码,尝试添加此功能中。还是有蛮多细节需要注意的,比如需要注意 AWS API 限流,一次放多少规则过去,ALB 的 TargetGroup 会不会爆炸💥等问题
核心代码改动思考
- watch Ingress ---> Service ---> Pod ---> PodInfo
- 最后直接获取 PodInfo 信息后添加到 ALB targetgroup,可以考虑 targetgroupbinding 模块的逻辑中按照不同的 clusterName 来添加,这样其实就可以实现同时控制多个 k8s 集群
// buildPodInfo will construct PodInfo for given pod.
func buildPodInfo(pod *corev1.Pod) PodInfo {
podKey := NamespacedName(pod)
var podENIInfos []PodENIInfo
// we kept podENIInfo as nil if the eniInfo via annotation is malformed.
if eniInfo, err := buildPodENIInfos(pod); err == nil {
podENIInfos = eniInfo
}
var containerPorts []corev1.ContainerPort
for _, podContainer := range pod.Spec.Containers {
containerPorts = append(containerPorts, podContainer.Ports...)
}
return PodInfo{
Key: podKey,
UID: pod.UID,
ContainerPorts: containerPorts,
ReadinessGates: pod.Spec.ReadinessGates,
Conditions: pod.Status.Conditions,
PodIP: pod.Status.PodIP,
ENIInfos: podENIInfos,
}
}
网友评论