Kubernetes Ingress 模块初探

96
bellengao
2018.06.24 13:05 字数 1105

Ingress是Kubernetes中用于对Service进行公网负载均衡的一个模块,要使用ingress资源,必须有对应的ingress controller来管控ingress。业务需要实现定制化的ingress controller,将ingress资源与公司自研的公网负载均衡服务对应起来,实际上就是使用公司自研的负载均衡服务对Kubernetes运行的Service服务提供公网负载均衡。本文对Kubernetes的ingress模块进行一个初探。

Kubernetes基本概念

Kubernetes以RESTFul的形式开放API, 可操作的REST对象有:

    Pod: Kubernetes最基本的部署调度单元,可以包含一个或多个Contanier
    Service: Pod的路由代理对象,用于Pod之间的服务发现。如果要访问一个Pod,只需要知道Service的地址就可以,从而保证Pod的动态变化对访问端透明
    ReplicationController:Pod的复制抽象,用于Pod的扩容缩容。通过ReplicationController, 可以指定一个应用需要多少份复制,Kubernetes将为每份复制创建一个Pod,并且能够自动重建(Pod宕机的情况下)

Pod与Service, ReplicationController通过Lable(键值对,例如:app:my-service)进行关联。Service通过Label Selector来筛选出一组Pods.

Service实例

    kind: Service
    apiVersion: v1
    metadata:
    name: my-service
    spec:
    selector:
        app: MyApp
    ports:
    - protocol: TCP,
      port: 80,
      targetPort: 9376

上述yaml配置将会创建一个名为“my-service”的Service,通过内容为“app=MyApp”的Label映射到Pods的端口9376,Secector将会一直对Pods进行筛选,并将筛选出的Pods放入名为“my-service”的Endpoints中。

Exernal Service

Kubernetes v1.2版本中,发布了关于External Service的新特性,目的在于将用户创建的Service开放到公网IP。Kubernetes提供了三种类型的Services:

    ClusterIP: 为Service分配虚拟地址,但是该地址只能在Kubernetes集群内部中访问,这也是Services的默认类型
    NodePort: 在ClusterIP基础上将服务绑定到集群节点的指定端口上,可以通过<NodeIP>:NodePort访问Service
    LoadBalancer:在NodePort的基础上使用外部的负载均衡服务,通过该负载均衡服务来访问集群内部的Services,实际上经过了两层转发

Kubernetes提供基于NodePort和LoadBalancer的方式,将service开放到公网IP.另外,如果有公网IP到Kubernetes集群中的一个或多个节点有路由可达,可以通过指定External IPs字段将服务暴露给公网, 例如:

    kind: Service
    apiVersion: v1
    metadata:
    name: my-service
    spec:
    selector:
        app: MyApp
    ports:
    - name: http
      protocol: TCP
      port: 80
      targetPort: 9376
    externalIPs: 
    - 80.11.12.10

通过上述配置,可以通过80.11.12.10:80访问到名为“my-service”的Service.

通过指定Service 类型将服务暴露给公网,NodePort类型的Service只能支持TCP & UDP协议, LoadBalancer类型的Service只支持TCP协议.

Ingress

Ingress的引入正是为了解决Service的短板:只能面向L4. 基于Ingress, 可以方便的创建基于HTTP/HTTPS的七层负载均衡。
Ingress就是一系列的转发规则集合,通过它可以将集群内部的Service暴露给公网。它也是可操作的REST对象,可以通过API方便的创建一个Ingress对象:

     apiVersion: extensions/v1beta1
     kind: Ingress
     metadata:
        name: test-ingress
     spec:
        rules:
        - host: c.163.com
          http:
            paths: 
              - path: /testpath
                backend:
                serviceName: test
                servicePort: 80

上述配置指定了一个名为“test-ingress”的Ingress资源,在spec属性中指定了转发规则(v1.2中仅支持HTTP协议),一个完整的http转发规则包含host,path,与backend后端服务,访问c.163.com/testpath将会受到来自后端服务test:80的响应。

Ingress Controller

使用Ingress资源必须有相应的Ingress controller来控制Ingress的运行。Ingress controller的主要功能包括

    1. 根据Ingress的配置,创建负载均衡服务
    2. 为Ingress分配IP
    3. 监控Ingress的变化

Ingress controller不是Kubernetes源码中的一部分,并不会像EndpointController或者ReplicationControler,在集群创建过程中就会启动. 因此,需要实现自己的Ingress controller,并将其部署为一个Kubernetes Pod。

一个简单的Ingress controller

如果使用nginx做负载均衡,实现一个nginx controller比较简单,该nginx controller的作用就是:

    1. 从api server中获取ingress
    2. 基于nginx配置模板文件,生成nginx.conf
    3. reload nginx

使用Google提供的一个nginx-ingress controller,根据如下配置, 将该controller部署在Kubernetes集群中:

    apiVersion: v1
    kind: ReplicationController
    metadata:
        name: nginx-ingress
        labels:
            app: nginx-ingress
    spec:
        replicas: 1
        selector:
            app: nginx-ingress
        template:
            metadata:
            labels:
                app: nginx-ingress
            spec:
            containers:
        - image: gcr.io/google_containers/nginx-ingress:0.1
            imagePullPolicy: Always
            name: nginx
            ports:
            - containerPort: 80
                hostPort: 80

然后创建一个Ingress:

    apiVersion: extensions/v1beta1
    kind: Ingress
    metadata:
        name: test
    spec:
        rules:
        - host: foo.bar.com
            http:
            paths:
            - path: /foo
              backend:
                    serviceName: fooSvc
                    servicePort: 80
        - host: bar.baz.com
            http:
            paths:
            - path: /bar
                backend:
                    serviceName: barSvc
                    servicePort: 80

根据该Ingress的配置,nginx controller生成的nginx.conf为:

        events {
            worker_connections 1024;
        }
        http {
            server {
                listen 80;
                server_name foo.bar.com;

                location /foo {
                     proxy_pass http://fooSvc;
                }
            }
            server {
                listen 80;
                server_name bar.baz.com;

                location /bar {
                    proxy_pass http://barSvc;
                }
            }
        }

基于上述配置,将foo.bar.com或者bar.baz.com解析为nginx-ingress controller所在主机上的公网IP,就可以访问到foo.bar.com/foo.

定制Ingress Controller

上一节中简单的nginx-ingress controller,只是使用了nginx做负载均衡,如果要使用第三方云厂商的负载均衡服务,就必须实现定制化的Ingress controller了。目前,Google开源了基于GSLB服务的Ingress controller:GLBC.

GLBC管控Ingress资源,把每一个Ingress都转换成一个GCE L7(Google Compute Engine 七层负载均衡服务), 并且把Ingress中的转发rules转换成GCE Url Map,这样可以通过一个负载均衡服务访问多个Kubernetes Service。这和使用Loadbalancer类型的Service来开放服务不同,Loadbalancer类型的Service将为每一个Kubernetes Service分配一个公网IP。

GLBC的使用方式如下:

    1.创建RC(Replication controller,GBLC Ingress controller也属于RC资源)
    2.创建Services, Ingress
    3.等待异步创建GCE L7, 创建完成后GLBC为Ingress分配IP

GLBC还可以提供健康检查,HTTPS服务等,功能还在进一步完善中。如果有兴趣可以参考官方Daemon:https://github.com/kubernetes/contrib/tree/master/ingress/controllers/gce

参考资料

    1.Kubernetes官方文档:http://kubernetes.io/docs/
    2.Kubernetes初探:http://blog.csdn.net/zhangjun2915/article/details/40598151
日记本
Web note ad 1