容器中跨主機的網路方案-Calico

衡子發表於2018-05-25

容器中的網路是建立docker叢集的重要內容。

本文將介紹如何用Calico實現容器的多節點互通。

Calico的元件結構如下：

Calico通過etcd同步Bridge的資訊，各個Docker node間通過BGP進行路由的互動。Iptables實現NAT、訪問控制等。

具體的安裝過程如下，其中兩個節點的IP地址分別是10.1.1.4和10.1.1.5，在10.1.1.4上安裝etcd：

一 安裝docker 

yum install docker -y
vim /etc/docker/daemon.json
{
"registry-mirrors": ["registry.docker-cn.com"],
"cluster-store": "etcd://10.1.1.4:2379"
}
systemctl enable docker
systemctl start docker

二 安裝etcd

yum install etcd -y

修改etcd的配置檔案：

cat /etc/etcd/etcd.conf | grep -v ^#

ETCD_DATA_DIR="/var/lib/etcd/default.etcd"
ETCD_LISTEN_CLIENT_URLS="http://0.0.0.0:2379"
ETCD_NAME="master"
ETCD_ADVERTISE_CLIENT_URLS="http://10.1.1.4:2379"

啟動etcd：

systemctl enable etcd
systemctl start etcd

三 安裝Calico

1 下載Calico 

wget -O /usr/local/bin/calicoctl https://github.com/projectcalico/calicoctl/releases/download/v1.6.1/calicoctl
chmod +x /usr/local/bin/calicoctl

2啟動Calico

Calico啟動時，會調取calico的配置檔案，編輯etcd的資訊：

vim /etc/calico/calicoctl.cfg

apiVersion: v1
kind: calicoApiConfig
metadata:
spec:
  datastoreType: "etcdv2"
  etcdEndpoints: http://10.0.1.4:2379

3先下載calico node的docker image

docker pull quay.io/calico/node:v2.6.0

4 啟動calico

calicoctl node run --node-image quay.io/calico/node:v2.6.0

5 檢查calico的狀態

calicoctl node status

6 建立docker的calico網路

docker network create --driver calico --ipam-driver calico-ipam net1

四 基於Calico網路建立容器

在node1上建立container：

docker run -d --net net2 --name c1 nginx

同樣在node2上也建立contianer：

docker run -d --net net2 --name c2 nginx

兩邊可以互通。

檢視兩個node上的路由：

可以看到Calico是個扁平的網路，通過bgp宣告路由，容器網路的網段路由指向node的IP地址。

容器內部地址和路由：

五 Azure支援Calico的配置

由於公有云都採用SDN的網路架構，和資料中心的資料轉發模型不同。在Azure需要做特別的配置，才能支援Calico的扁平網路的轉發模式。

1 使用者自定義路由

在node所在的網路配置使用者自定義路由：

Node1的容器網路路由指向node1的IP地址

Node2的容器網路路由指向node2的IP地址

關聯到subnet上：

2 每個node開啟IP Forward

開啟這兩個功能後，Calico網路就可以通了。

總結：

Calico網路是通過BGP進行容器網路路由互動的一種Docker網路的實現方式。其實現方式相對比較簡單，效能損耗更小。

相關文章