Kubernetes组件kube-proxy的IPVS功能的使用

作者: 李佶澳   转载请保留:原文地址   更新时间:2019-01-15 16:27:02 +0800

说明

Kube-proxy是kubernetes的标准组件之一,负责将访问service的cluster ip的请求,转发给service的endpoint,通常就是pod。

Kube-proxy最早使用iptables实现这一功能,但是iptables的性能较低,而且随着service数量增加,iptables规则数量快速增加,在规则更新、维护、性能方面有潜在的隐患。

Kubernetes 1.8版本中开始用ipvs实现同样的功能,在1.10版本中将ipvs设置为默认模式,在1.11版本中ipvs模式成为正式的(stable)特性。

使用

要使用ipvs模式需要安装有ipvsadmipset

yum install -y ipvsadm ipset

对于ipvs还是试用特性的版本(1.8~1.9),用下面的方式启用:

--feature-gates SupportIPVSProxyMode=true --proxy-mode=ipvs

1.10以后,默认就是ipvs模式。特性在不同版本中的状态见Kubernetes Feature Gates,在其中搜索“SupportIPVSProxyMode”:

SupportIPVSProxyMode    false    Alpha   1.8     1.8
SupportIPVSProxyMode    false    Beta    1.9     1.9
SupportIPVSProxyMode    true     Beta    1.10    1.10
SupportIPVSProxyMode    true     GA      1.11    

启动之后最明显的变化就是,多了一个绑定很多cluster service ip的kube-ipvs0网卡:

4: kube-ipvs0: <BROADCAST,NOARP> mtu 1500 qdisc noop state DOWN
    link/ether 7a:f9:85:2f:45:7e brd ff:ff:ff:ff:ff:ff
    inet 172.16.38.10/32 brd 172.16.38.10 scope global kube-ipvs0
       valid_lft forever preferred_lft forever
    inet 172.16.0.2/32 brd 172.16.0.2 scope global kube-ipvs0
       valid_lft forever preferred_lft forever
    inet 172.16.53.73/32 brd 172.16.53.73 scope global kube-ipvs0
       valid_lft forever preferred_lft forever
    inet 172.16.102.254/32 brd 172.16.102.254 scope global kube-ipvs0
       valid_lft forever preferred_lft forever
    inet 172.16.28.217/32 brd 172.16.28.217 scope global kube-ipvs0
       valid_lft forever preferred_lft forever
    inet 172.16.98.239/32 brd 172.16.98.239 scope global kube-ipvs0
       valid_lft forever preferred_lft forever
    inet 172.16.0.1/32 brd 172.16.0.1 scope global kube-ipvs0
       valid_lft forever preferred_lft forever
    inet 172.16.123.182/32 brd 172.16.123.182 scope global kube-ipvs0
       valid_lft forever preferred_lft forever
    inet 172.16.31.68/32 brd 172.16.31.68 scope global kube-ipvs0
       valid_lft forever preferred_lft forever

如果从ipvs模式切换到iptables模式,ipvs的规则会被清空,包括kube-ipvs0网卡。反过来从iptables模式切换到ipvs模式,iptables规则会被清空。

参考

  1. kube-proxy
  2. Kubernetes Feature Gates

本文原创首发于网站:www.lijiaocn.com

QQ交流群

区块链实践互助QQ群:576555864

Kubernetes实践互助QQ群:947371129

Prometheus实践互助QQ群:952461804

Kong/Envoy实践互助QQ群:952503851

Ansible实践互助QQ群:955105412

Copyright @2011-2019 All rights reserved. 转载请添加原文连接,合作请加微信lijiaocn或者发送邮件: [email protected],备注网站合作 友情链接: lijiaocn github.com