容器云平台No.4~kubernetes 服务暴露之Ingress

2024-01-29 17:52:28

容器云平台No.4~kubernetes 服务暴露之Ingress

scofield 菜鸟运维杂谈

这是容器云平台第四篇，接上一篇继续，
首先kubernetes服务暴露有如下几种方式：

NodePort
Loadbalance
ClusterIP
Ingress
本文紧贴第一篇架构图，只介绍Ingress,其余的后续再详细说。。

Ingress是什么？

Ingress 是对集群中服务的外部访问进行管理的 API 对象，典型的访问方式是 HTTP，当然TCP也是可以管理滴。
Ingress 可以提供负载均衡、SSL 终结和基于域名的虚拟托管。
大白话就是：把kubernetes集群部署的服务暴露出来，让集群外部的用户或者服务能访问到。

能为kubernetes提供ingress的控制器很多，本文就用基于HAProxy的控制器：Haproxy Ingreess。
HAProxy是一个快速可靠的TCP和HTTP反向代理和负载均衡器。
当然，一个kubernetes集群也可以同时部署多种ingress控制器。

HAProxy Ingress

HAProxy Ingress 通过监控Kubernetes API,获取services后端的pod状态，动态更新haproxy的配置文件，以实现负载均衡。
它允许每个代理每秒有数千个请求，不管集群的大小，具有非常低的延迟。

简单做个介绍，接下来开始实战。

部署HAProxy Ingress到kubernetes集群

下载yaml部署文件：wget https://haproxy-ingress.github.io/resources/haproxy-ingress.yaml
修改haproxy-ingress.yaml，因为现在使用的是1.19版本，有的api版本已经过期，需要修改下
rbac.authorization.k8s.io/v1beta1 改为rbac.authorization.k8s.io/v1，如果不修改会有Warning，但是目前不影响
部署：kubectl apply -f haproxy-ingress.yaml


 1    [root@k8s-master001 opt]# kubectl  apply -f haproxy-ingress.yaml 
 2    namespace/ingress-controller created
 3    serviceaccount/ingress-controller created
 4    Warning: rbac.authorization.k8s.io/v1beta1 ClusterRole is deprecated in v1.17+, unavailable in v1.22+; use rbac.authorization.k8s.io/v1 ClusterRole
 5    clusterrole.rbac.authorization.k8s.io/ingress-controller created
 6    Warning: rbac.authorization.k8s.io/v1beta1 Role is deprecated in v1.17+, unavailable in v1.22+; use rbac.authorization.k8s.io/v1 Role
 7    role.rbac.authorization.k8s.io/ingress-controller created
 8    Warning: rbac.authorization.k8s.io/v1beta1 ClusterRoleBinding is deprecated in v1.17+, unavailable in v1.22+; use rbac.authorization.k8s.io/v1 ClusterRoleBinding
 9    clusterrolebinding.rbac.authorization.k8s.io/ingress-controller created
10    Warning: rbac.authorization.k8s.io/v1beta1 RoleBinding is deprecated in v1.17+, unavailable in v1.22+; use rbac.authorization.k8s.io/v1 RoleBinding
11    rolebinding.rbac.authorization.k8s.io/ingress-controller created
12    configmap/haproxy-ingress created
13    daemonset.apps/haproxy-ingress created

查看部署状态


1    [root@k8s-master001 opt]# kubectl  get all -n ingress-controller
2    NAME                             DESIRED   CURRENT   READY   UP-TO-DATE   AVAILABLE   NODE SELECTOR AGE
3    daemonset.apps/haproxy-ingress   0         0         0       0            0           role=ingress-controller   6m2s

什么鬼，为什么没有haproxy相关的pod呢？

5.现在再来看下 haproxy-ingress.yaml 这个文件，发现其中定义了nodeSelector节点标签选择器，但是现在集群节点没有任何机器有这个标签，因此需要给node设置合理的标签，要不然不会创建pod
现在手动给master003添加一个标签role=ingress-controller


1    [root@k8s-master001 opt]#  kubectl label node k8s-master003 role=ingress-controller
2    node/k8s-master003 labeled

6.再来查看下，已经有haproxy-ingress-6mfqr，状态为Running，表示已经部署好了，是不是so easy~~~


1    [root@k8s-master001 opt]# kubectl  get all -n ingress-controlle
2    NAME                        READY   STATUS    RESTARTS   AGE
3    pod/haproxy-ingress-6mfqr   1/1     Running   1          2m40s
4
5    NAME                             DESIRED   CURRENT   READY   UP-TO-DATE   AVAILABLE   NODE SELECTOR             AGE
6    daemonset.apps/haproxy-ingress   1         1         1       1            1           role=ingress-controller   18m

使用Ingress暴露服务

这里使用上一篇部署的nginx作为示例，部署上篇，现在查看下nginx状态


1[root@k8s-master001 ~]# kubectl  get po,svc
2NAME          READY   STATUS    RESTARTS   AGE
3pod/nginx-0   1/1     Running   0          32h
4
5NAME                 TYPE        CLUSTER-IP      EXTERNAL-IP   PORT(S)        AGE
6service/kubernetes   ClusterIP   10.96.0.1       <none>        443/TCP        2d2h
7service/nginx        NodePort    10.106.27.213   <none>        80:30774/TCP   32h

可以看到有一个名为nginx的service


 1[root@k8s-master001 ~]# cat ingress.yaml 
 2apiVersion: extensions/v1beta1
 3kind: Ingress
 4metadata:
 5  name: nginx
 6  annotations:
 7    kubernetes.io/ingress.class: haproxy
 8spec:
 9  rules:
10  - host: nginx.test.cn
11    http:
12      paths:
13       - path: /
14         backend:
15           serviceName: nginx
16           servicePort: 80

执行部署，会有个Warning，因为kubernetes apiVersion更新，以后会不在支持extensions/v1beta1，这里不影响，先忽略。


1[root@k8s-master001 ~]# kubectl  apply -f ingress.yaml
2Warning: extensions/v1beta1 Ingress is deprecated in v1.14+, unavailable in v1.22+; use networking.k8s.io/v1 Ingress
3ingress.extensions/nginx configured

查看部署结果


1[root@k8s-master001 ~]# kubectl  get ing 
2NAME    CLASS    HOSTS             ADDRESS   PORTS   AGE
3nginx   <none>   nginx.test.cn             80      21m

现在，需要自己把nginx.test.cn解析到haproxy-ingresss所在节点的IP，本文haproxy-ingresss部署到了master003(10.26.25.22)
测试的话，直接修改/etc/hosts文件，然后可以访问nginx.test.cn


 1[root@k8s-master001 ~]# curl -I nginx.text.cn
 2HTTP/1.1 200 OK
 3server: nginx/1.19.2
 4date: Sat, 12 Sep 2020 12:40:01 GMT
 5content-type: text/html
 6content-length: 612
 7last-modified: Tue, 11 Aug 2020 14:50:35 GMT
 8etag: "5f32b03b-264"
 9accept-ranges: bytes
10strict-transport-security: max-age=15768000

从结果可以看到，返回状态码，说明可以访问到部署的nginx服务了。

注：文中图片来源于网络，如有侵权，请联系我及时删除。

码农公寓