手把手教你搭建Docker Registry私服

裝逼未遂的程式設計師發表於2018-05-31

版權宣告: 本文為博主原創文章,未經博主允許不得轉載。關注公眾號技術匯(ID: jishuhui_2015) 可聯絡到作者。

〇、前言

Build, Ship and Run any App, Anywhere

關於Docker更多的概念將不在本文贅述了,作為虛擬化市場的一顆冉冉升起的新星,Docker得到了越來越多企業的青睞,越來越多的開發者決定擁入Docker的懷抱。

“集裝箱”是Docker設計哲學之所在,它讓一臺物理機(或者虛擬機器)同時執行多個彼此隔離的應用變得更為輕鬆簡單,當然這一切還是多虧Linux的相關底層技術,當然,也包括OS X,Windows這兩個作業系統。

Docker的相關教程已經夠多了,但是由於Docker近年來發展迅猛,版本迭代速度較快,多個版本之間還存在不相容的情況,如果在網上找部落格文章,未必能解決自己遇到的問題。

當然,對於Docker的環境安裝,基礎命令之類的內容,是完全沒有問題的,通讀官網文件內容基本都能順利掌握。然而,當筆者嘗試著搭建一套基於SSL的Docker Registry(官網推薦的做法)卻遇到了不少的麻煩,對於這部分內容,大多數部落格文件內容都是直接跳過了SSL的環節,採用了HTTP的訪問形式。

特此分享,通讀完了此篇文章後,對於搭建Docker Registry就不再是問題了。

> docker --version

Docker version 18.03.1-ce, build 9ee9f40
複製程式碼

以上是我的Docker環境,建議安裝Docker1.6+以上版本。

除此之外,讀者還需要:

1、一臺安裝了CentOS_7_64bit作業系統的主機(或者虛擬機器);

2、申請一個域名。不然,可以改HOST檔案,但不保證能成功。筆者在阿里雲申請了一個個人域名,包了5年,價值¥105;

3、如果申請了域名,順便拿一個免費的CA證書,因為需要實現HTTPS訪問,SSL證書是必須的,同樣,阿里雲上有免費證書申請。不然,可以使用OpenSSL自己生成,這也是很多博文所提到的做法,不保證成功;

4、再裝上一個nginx做代理,可選。

5、熟悉Docker的基本概念和常用命令,但不必瞭解Dockerfile,Compose,Swarm,Kubernetes等高階知識。

一、從Docker映象說起

抽象的概念闡述不多說了,筆者舉兩個例子,讓大家感受一下:

1、我們從系統之家下載來的ISO檔案,除了基礎的作業系統,還可能內建了多個預裝軟體;

2、在使用maven管理jar包依賴的時候,為了避免每次都從中央倉庫拉取依賴包,使用了nexus做了代理倉庫。

可以認為,Docker映象就是一系列軟體(檔案)的組合,只要將它們放在合適的宿主上,即可做到開箱即用。

關於本文需要的Docker映象操作,有五個常用的命令:

a、拉取映象,後跟映象倉庫名稱,如果要指定某個版本,可以帶上tag。

> docker pull <repo>[:tag]
複製程式碼

b、列出所有映象,能得到映象的相關基本資訊。

> docker images
REPOSITORY                   TAG             IMAGE ID          CREATED        SIZE
redis                       latest          bfcb1f6df2db      3 weeks ago     107MB
registry                      2             d1fd7d86a825      4 months ago    33.3MB
hyper/docker-registry-web   latest          0db5683824d8      19 months ago   599MB
複製程式碼

c、刪除映象。可以根據映象ID,或者映象倉庫名稱進行刪除。

> docker rmi <IMAGE ID>/<repo>
複製程式碼

d、映象打標。可以將此操作與Git打標進行類比,相當於是release一個可用的映象版本。

> docker tag <repo> <new_repo>[:tag]
複製程式碼

e、映象推送。同樣是可以借鑑Git領域的push操作,將打包好的映象推送給遠端倉庫(即為Docker Registry)。

> docker push <new_repo>[:tag]
複製程式碼

以上五個命令只做簡單介紹,不是本文的重點。更多映象操作命令,可以自行查閱之。

進行接下來的操作之前,請讀者先將registry映象pull下來。

> docker pull registry:2
2: Pulling from library/registry
81033e7c1d6a: Pull complete 
b235084c2315: Pull complete 
c692f3a6894b: Pull complete 
ba2177f3a70e: Pull complete 
a8d793620947: Pull complete 
Digest: sha256:672d519d7fd7bbc7a448d17956ebeefe225d5eb27509d8dc5ce67ecb4a0bce54
Status: Downloaded newer image for registry:2
複製程式碼

此過程會持續幾分鐘,視網路狀況而定,請讀者耐心等候。

注意:筆者在pull的時候,指定了TAG,即為使用v2版本的registry,對於v1版本的registry,讀者大可不必在意了,基本上是淘汰了。

二、先睹為快

對於急切想看一下Docker Registry執行效果的讀者,可以先閱讀本節內容。

執行如下命令即可:

> docker run -d \
 -p 5000:5000 \
 -v /usr/local/registry:/var/lib/registry \
 --restart=always \
 --name registry \
 registry:2
複製程式碼

這是一條典型的run命令,不出意外的話,Registry就在5000埠啟動了。

為了驗證,讀者可以拉取一個busybox映象(因為體積小),進行實驗。

> docker pull busybox
複製程式碼

拉取最新的busybox映象後,再給其打標,準備釋出到Registry中。

> docker tag busybox localhost:5000/bosybox:v1.0
複製程式碼

最後再推送給Registry。

> docker push localhost:5000/bosybox:v1.0
複製程式碼

此時,Registry就有了busybox:v1.0映象了,這時可以不用再去Docker Hub上面拉取了,通過自建的Registry即可。

> docker pull localhost:5000/bosybox:v1.0
複製程式碼

如果想檢視遠端倉庫有哪些映象,可以執行如下命令:

> curl http://localhost:5000/v2/_catalog
複製程式碼

窺一斑而見全豹,通過以上命令,我們能得出一個重要的結論:

對Registry的訪問都是通過一系列REST API完成的。

到此為止,我們已經搭建了一個Docker Registry的“半成品”,說是“半成品”是因為這個Registry只能在本機正常工作,如果在其他主機上試圖推送映象上來,結果是失敗的。

如果要做到externally-accessible,就必須使用CA安全證書

三、基於SSL證書改造Registry

在進行本節的操作前,請讀者確認是否滿足了文章開頭所列的條件。

筆者申請了一個域名:iwendao.vip,並對映出來了一個二級域名:registry.iwendao.vip,專門用來作為Docker Registry的訪問,然後基於此二級域名申請CA證書。

不出意外的話,從阿里雲申請的免費證書都是由Symantec頒發的,將證書下載下來後,壓縮包內有兩份檔案:xxxxxx.pem、xxxxxx.key。

將其更名為server.key,server.pem,通過ftp工具上傳至主機,假設存放的目錄是:/usr/local/certs。

> ll /usr/local/certs
- rw-r--r-- 1 root root 1678 May 28 13:42 server.key
- rw-r--r-- 1 root root 3662 May 28 13:42 server.pem
複製程式碼

因為頒發的是intermediate certificate,會發現沒有crt檔案,可以使用如下命令得到:

> cat server.pem > server.crt
複製程式碼

直接將pem檔案內作為crt檔案的內容輸入,生成了server.crt檔案。

至此,域名及其證書已準備就緒。

如果想使用nginx做代理,需要更改一下nginx.conf檔案,以下是筆者的配置內容:

user  root root;
worker_processes  1;
events {
	worker_connections  1024;
}
http {
	include       mime.types;
	default_type  application/octet-stream;
	log_format  main  '$remote_addr - $remote_user [$time_local] "$request" '
		'$status $body_bytes_sent "$http_referer" '
		'"$http_user_agent" "$http_x_forwarded_for"';
	access_log  logs/access.log  main;
	sendfile        on;
	keepalive_timeout 60;
	gzip  on;
	server {
		listen 443;
		server_name i-wendao;
		ssl on;
		root html;
		index index.html index.htm;
		ssl_certificate   /usr/local/certs/server.pem;
		ssl_certificate_key  /usr/local/certs/server.key;
		ssl_session_timeout 5m;
		ssl_ciphers ECDHE-RSA-AES128-GCM-SHA256:ECDHE:ECDH:AES:HIGH:!NULL:!aNULL:!MD5:!ADH:!RC4;
		ssl_protocols TLSv1 TLSv1.1 TLSv1.2;
		ssl_prefer_server_ciphers on;
		location ~  {
			proxy_pass_header Server;
			proxy_set_header Host $http_host;
			proxy_set_header X-Real-IP $remote_addr;
			proxy_set_header X-Scheme $scheme;
			proxy_pass https://registry;
		}
	}
	upstream registry {
		server 127.0.0.1:5000;
	}
}
複製程式碼

在nginx.conf配置檔案中,需要注意兩個地方:

1、開啟nginx的ssl,只需要配置之前下載好的pem和key檔案,這是阿里雲官方給出的示例,親測有效;

2、因為對Registry的訪問都是通過REST API完成的,而且是HTTPS的訪問協議,所以location節點的配置中,proxy_pass配置的是https://registry,如果配置成http://registry,一旦Docker Registry啟用了SSL後,是訪問不通的。

宿主機的配置已經完成了,接下來對Docker容器進行配置。

對於Docker Registry Server的部署,官方給了兩個途徑:

其一,針對引數不多的情況,可以直接在docker run命令指定;

另一個是通過yaml配置檔案,可以一次性配置多個引數。

在本節,筆者將使用第一種方式部署,第二種方式的部署可以參見文末的附文。

> docker run -d \
  -p 5000:5000 \
  -v /usr/local/registry:/var/lib/registry \
  -v /usr/local/certs:/certs \
  -e REGISTRY_HTTP_TLS_CERTIFICATE=/certs/server.crt \
  -e REGISTRY_HTTP_TLS_KEY=/certs/server.key \
  --restart=always \
  --name registry \
  registry:2
複製程式碼

如果沒有安裝nginx的讀者,可執行這條命令:

> docker run -d \
  -p 443:443 \
  -v /usr/local/registry:/var/lib/registry \
  -v /usr/local/certs:/certs \
  -e REGISTRY_HTTP_ADDR=0.0.0.0:443 \
  -e REGISTRY_HTTP_TLS_CERTIFICATE=/certs/server.crt \
  -e REGISTRY_HTTP_TLS_KEY=/certs/server.key \
  --restart=always \
  --name registry \
  registry:2
複製程式碼

可以看到,Docker Registry Server啟用SSL的時候,用到的是crt、key兩個證書檔案。

接下來,我們實驗一下。

> docker tag busybox registry.iwendao.vip/bosybox:v1.0
複製程式碼

最後再推送給Registry。

> docker push registry.iwendao.vip/bosybox:v1.0
複製程式碼

檢視遠端倉庫有哪些映象。

> curl https://registry.iwendao.vip/v2/_catalog
複製程式碼

在另外一臺主機,重複上述步驟,依然可以成功,說明已經搭建成功了。

四、Authentication的加持

通過對Registry Server的搭建,我們能明顯感覺得到,Docker對於安全控制有足夠的重視,這在全網HTTPS化的背景下是恰合時宜的做法。

這節是進階知識,目的是將Docker的安全機制做得更徹底——加上登入校驗機制。

很明顯,既然是私服,就意味著不是每個人都能提交映象的,只有憑藉登入使用者和密碼才行。

當然,登入校驗機制的前提是有HTTPS協議,否則,使用者名稱和密碼都將會明文傳輸。

Docker的認證機制也有很多實現,可以直接用代理(比如nginx)在Registry之前進行攔截驗證,高階的一些的是有Token服務端,引導使用者授權登入,實現難度較大。

本文以最簡單的htpasswd在實現登入校驗機制。關於htpasswd的更多介紹不在本文的範疇,請讀者自行查閱之。

如果主機上沒有安裝此命令工具,可以執行如下命令:

> yum install httpd-tools
複製程式碼

因為htpasswd是Apache2的附屬工具命令,如果安裝了Apache2,此命令理應是可以用的。

如果讀者不想安裝了,可以直接使用registry映象,其內建了httpd。

假設密碼檔案存放在/usr/local/auth目錄下面,執行如下命令

> htpasswd -Bbn admin 123456 > /usr/local/auth/passwd
複製程式碼

使用registry映象內建的httpd,如下:

> docker run --entrypoint htpasswd registry:2 -Bbn admin 123456 > /usr/local/auth/passwd
複製程式碼

兩種方式都能達到同樣的目的:在/usr/local/auth/passwd檔案中生成使用者名稱和密碼。

命令中的admin是使用者名稱,123456即為密碼。

檢視passwd檔案內容:

> cat /usr/local/auth/passwd
admin:$2y$05$/2H8DTcY.1JROHm0MnnK8.UulmbSclib63qTe8FGyWnnE9XWBz3cy
複製程式碼

雖然是同樣的命令,但在不同的主機,生成的結果並不相同。因此,在主機A上生成的密碼檔案不能用作主機B上進行認證。

接下來要啟動registry容器了:

> docker run -d \
  -p 5000:5000 \
  --restart=always \
  --name registry \
  -v /usr/local/auth:/auth \
  -e REGISTRY_AUTH=htpasswd \
  -e REGISTRY_AUTH_HTPASSWD_REALM=Registry_Realm \
  -e REGISTRY_AUTH_HTPASSWD_PATH=/auth/passwd \
  -v /usr/local/certs:/certs \
  -e REGISTRY_HTTP_TLS_CERTIFICATE=/certs/server.crt \
  -e REGISTRY_HTTP_TLS_KEY=/certs/server.key \
  registry:2
複製程式碼

啟動成功後,如果試圖直接檢視遠端倉庫有哪些映象,會提示未認證,如下:

> curl https://registry.iwendao.vip/v2/_catalog
{
	"errors": [{
		"code": "UNAUTHORIZED",
		"message": "authentication required",
		"detail": [{
			"Type": "registry",
			"Class": "",
			"Name": "catalog",
			"Action": "*"
		}]
	}]
}
複製程式碼

包括pull,push操作也都受限了。因此,在做操作之前,需要進行登入。

> docker login https://registry.iwendao.vip
複製程式碼

既然有登入,當然就有登出了。

> docker logout https://registry.iwendao.vip
複製程式碼

五、WEB UI for Registry

當我們把Registry Server搭建好了之後,就意味著要開始管理我們的映象了。這個時候會發現,並沒有一個視覺化的工具幫助使用者進行映象管理。

目前已經有很多開源的WEB UI管理工具:

1、docker-registry-frontend。截止到目前(2018年5月),其功能主要是映象列表檢視,標籤檢視,還未開放映象刪除功能,在GitHub上開源,stars 1k+。

2、docker-registry-web。相比docker-registry-frontend專案,此專案提供了映象刪除功能,還接入了角色系統,功能有了進一步完善,在GitHub上開源,stars 300+。

3、Rancher。這個平臺的定位類似Kubernetes,不僅僅是映象管理這麼簡單了,對於整個Docker容器管理都是能勝任的。

4、shipyard。很可惜,作者已經沒有精力維護了,從GitHub上的stars,不難看出其昔日的輝煌。

關於WEB UI的安裝部署就不再贅述了,都有其對應的文件。如果對於映象管理沒有什麼特別要求,可以不用WEB UI,或者使用前兩個之一。

六、總結

本文詳述了Docker Registry私服搭建的過程,總結了來自各類部落格,官網的學習資料,幫助讀者順利搭建Docker Registry私服。


附:

1、使用yaml檔案啟動registry server

假設配置檔案的存放路徑是:/usr/local/registry/config.yml

編輯其內容,如下:

version: 0.1
log:
  fields:
    service: registry
storage:
  cache:
    blobdescriptor: inmemory
  filesystem:
    rootdirectory: /var/lib/registry
    maxthreads: 100
  delete:
    enabled: true
http:
  addr: 0.0.0.0:5000
  host: https://registry.iwendao.vip
  secret: yoogurt-taxi-123!@#
  headers:
    X-Content-Type-Options: [nosniff]
  tls:
    certificate: /certs/214709594090104.crt
    key: /certs/214709594090104.key
health:
  storagedriver:
    enabled: true
    interval: 10s
    threshold: 3
複製程式碼

更多配置項,可以訪問Configuring a registry

配置檔案中的配置項是可以對應到前文中-e引數的環境變數,其規則就是:

1、變數名由大寫字母組成;

2、字首固定加上REGISTRY;

3、將YAML中的配置項的冒號(:)變成了下劃線(_)。

比如:

REGISTRY_HTTP_TLS_CERTIFICATE,對應的是http: tls: certificate配置項;

REGISTRY_AUTH_HTPASSWD_PATH,對應的是auth: htpasswd: path配置項。

值得注意的是,配置檔案中所涉及的路徑都是針對容器內的,這就意味著,在啟動registry映象的時候,需要通過-v引數指定掛載目錄。

儲存配置檔案後,即可啟動容器:

> docker run -d -p 5000:5000 --restart=always --name registry \
             -v /usr/local/certs:/certs
             -v /usr/local/registry/config.yml:/etc/docker/registry/config.yml \
             registry:2
複製程式碼

2、介紹關於Docker的書籍

  • 《第一本Docker書(修訂版)》,當之無愧的Docker啟蒙書。零基礎入門者可以著重看前五章基礎部分,掌握Docker的相關原理及其使用,可用作工具書。讀此書,建議跟著內容同步進行實踐,入門以後,能夠建立起對Docker的興趣,以便持續學習下去。
  • 《Docker 容器與容器雲(第2版)》,知識內容有所進階。第一部分內容為基礎知識,可以快速過一遍。本書對於容器雲的概念做了各方面反覆的解釋,非常精彩,可以吸收之。接下來就是容器編排、部署的內容了,可以加之實踐,培養感覺。
  • 《Kubernetes權威指南(第2版)》,當之無愧的Kubernetes入門書籍。讀完了《Docker 容器與容器雲(第2版)》的Kubernetes部分,再來讀此書,會輕鬆一些。

關注我們

相關文章