ceph rbd客戶端要求

客戶端系統核心 2.6.32以上

另外，我這個環境中把k9s-master1當做ceph客戶端，而服務端是k8s-node1。

安裝ceph rbd客戶端

[root@k8s-master1 ~]# yum search ceph
Loaded plugins: fastestmirror
Loading mirror speeds from cached hostfile
 * base: mirrors.aliyun.com
 * extras: mirrors.tuna.tsinghua.edu.cn
 * updates: mirrors.aliyun.com
========================================================= N/S matched: ceph =========================================================
centos-release-ceph-hammer.noarch : Ceph Hammer packages from the CentOS Storage SIG repository
centos-release-ceph-jewel.noarch : Ceph Jewel packages from the CentOS Storage SIG repository
centos-release-ceph-luminous.noarch : Ceph Luminous packages from the CentOS Storage SIG repository
ceph-common.x86_64 : Ceph Common

[root@k8s-master1 ~]# yum -y install centos-release-ceph-luminous.noarch

[root@k8s-master1 ~]# yum -y install ceph

將ceph服務端的秘鑰環複製到ceph的客戶端

    生產中不要複製秘鑰環，而是建立一個使用者，並賦予相應的許可權。

    我這裡複製秘鑰環是為了方便。

    登入ceph伺服器叢集中的任何一點，將其秘鑰環複製到ceph的客戶端。

[root@k8s-node1 ~]# cd /etc/ceph/
[root@k8s-node1 ceph]# scp ceph.conf 172.16.22.197:/etc/ceph/
[root@k8s-node1 ceph]# scp ceph.client.admin.keyring 172.16.22.197:/etc/ceph/

在ceph客戶端檢視rbd

[root@k8s-master1 ~]# rbd --image data info
rbd image 'data':
size 1024 MB in 256 objects
order 22 (4096 kB objects)
block_name_prefix: rbd_data.1149238e1f29
format: 2
features: layering, exclusive-lock, object-map, fast-diff, deep-flatten
flags:

    輸出如上資訊，表明我們可以使用rbd。

對映rbd到客戶端並且掛載使用 

    對映rbd到客戶端並且掛載使用 rbd map  rbd/data 

[root@k8s-master1 ~]# rbd map rbd/data  ##rbd是pool的名字，data是塊儲存的名字
rbd: sysfs write failed
RBD image feature set mismatch. Try disabling features unsupported by the kernel with "rbd feature disable".
In some cases useful info is found in syslog - try "dmesg | tail".
rbd: map failed: (6) No such device or address

    看到上面報錯了，我們需要執行一下如下命令：

[root@k8s-master1 ~]# rbd  feature disable   rbd/data   exclusive-lock object-map fast-diff deep-flatten

[root@k8s-master1 ~]# rbd map rbd/data 
/dev/rbd0

[root@k8s-master1 ~]# fdisk -l
Disk /dev/rbd0: 1073 MB, 1073741824 bytes, 2097152 sectors
Units = sectors of 1 * 512 = 512 bytes
Sector size (logical/physical): 512 bytes / 512 bytes
I/O size (minimum/optimal): 4194304 bytes / 4194304 bytes

    看到，我們把ceph的rdb塊裝置掛載到了k9s-master1機器上了。

    這時候，/dev/rdb0還是一個裸裝置，下面我們格式化一下它，給它建立一個檔案系統。

[root@k8s-master1 ~]# mkfs.ext4 /dev/rbd0

    掛載到/mnt下面：

[root@k8s-master1 ~]# mount /dev/rbd0 /mnt/

    這樣，我們就可以使用rbd塊裝置了。