目录

1.1.K8S的CNI网络插件-Flannel

1.1.1.集群规划

1.1.2.下载软件、解压、软链接

1.1.3.最终目录结构

1.1.4.拷贝证书

1.1.5.创建配置

1.1.6.创建启动脚本

1.1.7.检查配置、权限、创建日志目录

1.1.8.操作etcd、增加host-gw

1.1.9.创建supervisor配置

1.1.10.启动服务并检查

1.1.11.再次验证集群，pod之间网络互通

1.1.12.在各运算节点上优化iptables规则

1.1.13.在各运算节点保存iptables规则

集群规划

主机名 角色 ip
HDSS7-21.host.com flannel 10.4.7.21
HDSS7-22.host.com flannel 10.4.7.22

 下载软件、解压、软链接

官网下载地址:https://github.com/coreos/flannel/releases/download/v0.11.0/flannel-v0.11.0-linux-amd64.tar.gz

HDSS7-21.host.com上:

[root@hdss7- ~]# cd /opt/src/

[root@hdss7- ~]# wget https://github.com/coreos/flannel/releases/download/v0.11.0/flannel-v0.11.0-linux-amd64.tar.gz

[root@hdss7- ~]# mkdir /opt/flannel-v0.11.0

[root@hdss7- ~]# tar zxvf flannel-v0.11.0-linux-amd64.tar.gz -C /opt/flannel-v0.11.0/

[root@hdss7- ~]# ln -s /opt/flannel-v0.11.0 /opt/flannel

[root@hdss7- ~]# ll /opt/|grep flannel

lrwxrwxrwx  root root    Jun   : flannel -> flannel-v0.11.0/

drwxr-xr-x  root root  Jun   : flannel-v0.11.0

最终目录结构

[root@hdss7- opt]# tree -L

.

├── containerd

│   ├── bin

│   └── lib

├── etcd -> etcd-v3.1.20

├── etcd-v3.1.20

│   ├── certs

│   ├── Documentation

│   ├── etcd

│   ├── etcdctl

│   ├── etcd-server-startup.sh

│   ├── README-etcdctl.md

│   ├── README.md

│   └── READMEv2-etcdctl.md

├── flannel -> flannel-v0.11.0/

├── flannel-v0.11.0

│   ├── certs

│   ├── flanneld

│   ├── mk-docker-opts.sh

│   └── README.md

├── kubernetes -> kubernetes-v1.15.2/

├── kubernetes-v1.15.2

│   ├── addons

│   ├── LICENSES

│   └── server

└── src

    ├── etcd-v3.1.20-linux-amd64.tar.gz

    ├── flannel-v0.11.0-linux-amd64.tar.gz

    └── kubernetes-server-linux-amd64-v1.15.2.tar.gz

拷贝证书

各运算节点上:

/opt/flannel/certs

[root@hdss7- certs]# scp hdss7-:/opt/certs/ca.pem .

[root@hdss7- certs]# scp hdss7-:/opt/certs/client.pem .

[root@hdss7- certs]# scp hdss7-:/opt/certs/client-key.pem .

注:其他运算节点也需要ca.pem client.pem client-key.pem

创建配置

[root@hdss7- flannel]# vi subnet.env

FLANNEL_NETWORK=172.7.0.0/

FLANNEL_SUBNET=172.7.21.1/24

FLANNEL_MTU=

FLANNEL_IPMASQ=false

注:其他运算节点需将FLANNEL_SUBNET改成对应的网段，比如:10.4.7.22配置FLANNEL_SUBNET=172.7.22.1/24

创建启动脚本

[root@hdss7- flannel]# vim flanneld.sh

#!/bin/sh

./flanneld \

  --public-ip=10.4.7.21 \

  --etcd-endpoints=https://10.4.7.12:2379,https://10.4.7.21:2379,https://10.4.7.22:2379 \

  --etcd-keyfile=./certs/client-key.pem \

  --etcd-certfile=./certs/client.pem \

  --etcd-cafile=./certs/ca.pem \

  --iface=eth0 \

  --subnet-file=./subnet.env \

  --healthz-port=

注:flannel集群各主机的启动脚本略有不同，部署其他节点注意修改，比如10.4.7.22 --public-ip=10.4.7.22

检查配置、权限、创建日志目录

[root@hdss7- flannel]# chmod +x /opt/flannel/flanneld.sh

[root@hdss7- flannel]# mkdir -p /data/logs/flanneld

操作etcd,增加host-gw（适用于运算节点在同一个二层模型,三选一）

HDSS7-21.host.com上:

[root@hdss7- etcd]# ./etcdctl set /coreos.com/network/config '{"Network": "172.7.0.0/16", "Backend": {"Type": "host-gw"}}'

{"Network": "172.7.0.0/16", "Backend": {"Type": "host-gw"}}

[root@hdss7- etcd]#  ./etcdctl get /coreos.com/network/config

{"Network": "172.7.0.0/16", "Backend": {"Type": "host-gw"}}

创建supervisor配置

HDSS7-21.host.com上:

[root@hdss7- ~]# vi /etc/supervisord.d/flannel.ini

[program:flanneld-7-21]

command=/opt/flannel/flanneld.sh                             ; the program (relative uses PATH, can take args)

numprocs=                                                   ; number of processes copies to start (def )

directory=/opt/flannel                                       ; directory to cwd to before exec (def no cwd)

autostart=true                                               ; start at supervisord start (default: true)

autorestart=true                                             ; retstart at unexpected quit (default: true)

startsecs=                                                 ; number of secs prog must stay running (def. )

startretries=                                               ; max # of serial start failures (default )

exitcodes=,                                                ; 'expected' exit codes for process (default ,)

stopsignal=QUIT                                              ; signal used to kill process (default TERM)

stopwaitsecs=                                              ; max num secs to wait b4 SIGKILL (default )

user=root                                                    ; setuid to this UNIX account to run the program

redirect_stderr=true                                         ; redirect proc stderr to stdout (default false)

stdout_logfile=/data/logs/flanneld/flanneld.stdout.log       ; stderr log path, NONE for none; default AUTO

stdout_logfile_maxbytes=64MB                                 ; max # logfile bytes b4 rotation (default 50MB)

stdout_logfile_backups=                                     ; # of stdout logfile backups (default )

stdout_capture_maxbytes=1MB                                  ; number of bytes in 'capturemode' (default )

stdout_events_enabled=false                                  ; emit events on stdout writes (default false)

注:hdss7-22.host.com需要修改成[program:flanneld-7-22]

启动服务并检查

[root@hdss7- flannel]# supervisorctl  update

[root@hdss7- flannel]# supervisorctl status

再次验证集群，pod之间网络互通

[root@hdss7- ~]# ping 172.7.22.2

PING 172.7.22.2 (172.7.22.2) () bytes of data.

 bytes from 172.7.22.2: icmp_seq= ttl= time=8.50 ms

 bytes from 172.7.22.2: icmp_seq= ttl= time=2.58 ms

 bytes from 172.7.22.2: icmp_seq= ttl= time=4.40 ms

 bytes from 172.7.22.2: icmp_seq= ttl= time=0.353 ms

 bytes from 172.7.22.2: icmp_seq= ttl= time=0.420 ms

flannel vxlan模型（适用于运算节点不在同一个二层，三选一）

.停掉flanneld服务

[root@hdss7- ~]# supervisor stop flanneld--

[root@hdss7- ~]# supervisor stop flanneld--

.删除host-gw模型创建的路由

[root@hdss7- ~]# route del -net 172.7.21.0/ gw 10.4.7.21

[root@hdss7- ~]# route del -net 172.7.22.0/ gw 10.4.7.22

.修改etcd

[root@hdss7- ~]# cd /opt/etcd

[root@hdss7- etcd]# ./etcdctl get /coreos.com/network/config

[root@hdss7- etcd]# ./etcdctl rm /coreos.com/network/config

[root@hdss7- etcd]# ./etcdctl set /coreos.com/network/config '{"Network": "172.7.0.0/16", "Backend": {"Type": "VxLAN"}}'

[root@hdss7- etcd]# supervisor start flanneld--

[root@hdss7- ~]# supervisor start flanneld--

flannel 直接路由模型（自动识别是否在同一个二层模型，如果是同一个二层模型走host-gw，如果在同一个二层模型走vxlan模型，三选一）

.停掉flanneld服务

[root@hdss7- ~]# supervisor stop flanneld--

[root@hdss7- ~]# supervisor stop flanneld--

.修改etcd

[root@hdss7- ~]# cd /opt/etcd

[root@hdss7- etcd]# ./etcdctl get /coreos.com/network/config

[root@hdss7- etcd]# ./etcdctl rm /coreos.com/network/config

[root@hdss7- etcd]# ./etcdctl set /coreos.com/network/config '{"Network": "172.7.0.0/16", "Backend": {"Type": "VxLAN","Directrouting": true}}'

[root@hdss7- etcd]# supervisor start flanneld--

[root@hdss7- ~]# supervisor start flanneld--

 在各运算节点上优化iptables规则

  • 优化SNAT规则，各运算节点之间的各POD之间的网络通信不再出网
[root@hdss7- ~]# iptables -t nat -D POSTROUTING -s 172.7.21.0/ ! -o docker0 -j MASQUERADE

[root@hdss7- ~]# iptables -t nat -I POSTROUTING -s 172.7.21.0/ ! -d 172.7.0.0/ ! -o docker0 -j MASQUERADE

10.4.7.21主机上的，来源是172.7.21.0/24段的docker的ip，目标ip不是172.7.0.0/16段，网络发包不从docker0桥设备出站的，才进行SNAT转换

各运算节点保存iptables规则

[root@hdss7- ~]# iptables-save > /etc/sysconfig/iptables

、

返回顶部

最新文章

  1. Hadoop学习笔记—20.网站日志分析项目案例（一）项目介绍
  2. Bootstrap网格系统
  3. Spring 4.1+　的 JSONP使用
  4. Java中的数组操作进阶
  5. 设计模式之Inheritance versus Parameterized Types 继承和参数化类型
  6. jsp值传到后台Struts2中的action三种方法
  7. linux关闭声音
  8. Android基础问题汇总
  9. App抓包数据包之Paros的安装及使用
  10. python-igraph on windows10 64bit
  11. tee 命令详解
  12. vue项目中vux的使用
  13. InnoSetup 脚本打包及管理员权限设置
  14. python摸爬滚打之day022----模块(序列化操作)
  15. Asp.net core 学习笔记 (AutoMapper)
  16. 真机测试以及appstore发布流程
  17. 第八章Jdk代理 cglib代理
  18. js中利用cookie实现记住密码功能
  19. oogle advertiser api开发概述——速率限制
  20. java stackoverflowerror与outofmemoryerror区别（转）

热门文章

  1. Mybatis配置-简单的使用
  2. MySQL的CHAR 和 VARCHAR的区别
  3. Unity实现写入json文件
  4. CentOS上安装配置Python3.7
  5. Redis学习笔记（1）
  6. Java获取主板序列号、MAC地址、CPU序列号工具类
  7. Java中的集合（六）继承Collection的Set接口
  8. Rocket - debug - Example: Triggers
  9. akka-typed(3) - PersistentActor has EventSourcedBehavior
  10. Java实现 蓝桥杯VIP 算法提高 11-2删除重复元素