Ansible自動化部署工具-role模式安裝filebeat實際案例分析

藍胖子的程式設計夢發表於2023-11-10

大家好,我是藍胖子,前面一節我簡單的講了講Ansible的架構和編排任務的語法,可以發現,透過playbook方式編排任務時,能夠將任務文件化,但是在面對比較複雜且不同業務的任務編排時,維護playbook就變得複雜,所以Ansible產生了role模式針對複雜的任務進行編排工作。今天我們就透過一個實際的案例來看看如何使用role模式。

語法以及實際案例

平時我們在進行日誌收集的時候,往往會在每臺機器上安裝filebeat,並且由於每臺機器執行服務的不同,那麼收集日誌的配置檔案也是不一樣的,如何快速高效的部署filebeat以及擁有不同的配置檔案就是我們要思考的問題,當然不可能一臺機器一臺機器的修改配置檔案。

接下來我將會以一個我自己寫的filebeat相關的role舉例,來分析role模式涉及的一些規範以及如何寫一個好的任務編排, 案例中的filebeat的role模式擁有對filebeat的安裝,更新配置的功能。

role其實是對之前使用playbook的檔案目錄進行了一些規範(比如必須有roles目錄且和playbook入口檔案在同一位置,roles目錄下的各個特定role的目錄也是固定命名的)

程式碼已經上傳github

https://github.com/HobbyBear/ansible-role-filebeat.git

整個專案的目錄結構如下所示,filebeatop.yml到時候是我們執行ansible playbook命令的入口檔案,我們可以使用這樣的命令使用這個role , ansible-playbook -i hosts filebeatop.yml ,其中hosts目錄就是存放inventory主機清單。

.
├── ReadMe.md
├── filebeatop.yml
├── group_vars
│   └── test.yml
├── hosts
│   ├── prod
│   └── test
└── roles
    └── filebeat
        ├── handlers
        │   └── main.yml
        ├── tasks
        │   ├── install.yml
        │   ├── main.yml
        │   ├── rpm.yml
        │   └── updatecfg.yml
        └── templates
            ├── debug.conf
            ├── filebeatbox.yml
            └── log.yml

filebeatop.yml 的內容如下,其中roles配置項可以配置多個role,不過案例中就只配置了一個filebeat的role,這個role的名稱就是上述roles目錄下的filebeat這個資料夾的名稱。同時filebeatop.yml同時設定了變數version和logstashendpoint,不同的是version變數是role級別的。

- hosts: test  
  roles:  
    - role: filebeat  
      version : '7.14.2'  
  vars:  
    logstashendpoint:  192.168.0.2:5054

接著瞭解下roles目錄的結構,filebeat 就代表一個role,其下有handlers,tasks,templates目錄,它們存放的內容如下,

roles
└── filebeat
    ├── handlers
    │   └── main.yml
    ├── tasks
    │   ├── install.yml
    │   ├── main.yml
    │   ├── rpm.yml
    │   └── updatecfg.yml
    └── templates
        ├── debug.conf
        ├── filebeatbox.yml
        └── log.yml
  • tasks 裡面存放具體的Ansible 的各種模組定義的任務,其入口檔案是main.yml 它裡面可以透過include 引入其他task。就比如這個案例中,我在main.yml 引入了其他配置檔案定義的任務。main.yml 程式碼如下, 可以看到在引入其他配置檔案定義的任務時,我還用tags為任務打上了標籤,這個標籤可以讓我們後續根據特定的標籤執行任務。
-  include: install.yml  
   tags:  
     - install  
  
-  include: rpm.yml  
   tags:  
     - rpm  
  
-  include: updatecfg.yml  
   tags:  
     - updatecfg
  • handlers 目錄下存放任務的後續處理邏輯,它其實也是ansible的模組定義的各種任務,與tasks不同的是,它是專門放到tasks執行後執行的。例如在handlers的main.yml檔案中,我定義了一個名為restart Filebeat service 的handler,handlers/main.yml程式碼如下

become 設定為yes,become_method 設定為sudo 代表在執行這個service的命令時是要以sudo許可權執行的。

- name: restart Filebeat service  
  become: yes  
  become_method: sudo  
  service:  
    name: filebeat  
    enabled: yes  
    state: restarted

這個handler在tasks/updatecfg.yml中有被用到,如下,在更新完filebeat服務配置後,透過notify配置,定義所需的handler的名稱,便可以在特定task執行完成後執行對應的handler。

- name: 更新服務配置  
  shell: "sudo systemctl daemon-reload"  
  notify:  
    - restart Filebeat service
  • templates 目錄存放的是某些需要用到的配置檔案模板,在模板檔案中可以使用{{ 變數名 }} 引用,變數的定義可以在前面filebeatop.yml檔案中vars,或者roles配置中定義,也可以放到與hosts目錄同級的group_vars 目錄中定義,Ansible 關於變數的定義方式有很多種,這裡就不展開了。 拿案例中的group_vars舉例,其目錄下的檔名是inventory主機清單中的機器組的名稱,比如我這裡有個test的機器組,所以我在group_vars有個test.yml檔案,內容如下,定義了兩個變數 log_path和log_type。
log_path: "- /home/webserver/logs/box-api/box-api.log\r\n    - /home/webserver/logs/box-bsk/box-bsk.log\r\n    - /home/webserver/logs/box-flow/box-flow.log"  
  
log_type:  
  box

這兩個變數被 templates目錄下的log.yml檔案所引用。log.yml檔案內容如下(是一個典型的filebeat設定日誌採集路徑的配置)

- type: log  
  tail_files: true  
  paths:  
    {{ log_path}}  
  fields:  
    log_type: {{ log_type }}

如何使用這些模板檔案呢,其實就是透過ansible的template模組,拿filebeat role中的updatecfg.yml定義的任務片段舉例,將filebeat 相關的配置檔案上傳到主機上對應的目錄。

- name: 傳送配置檔案  
  become: yes  
  become_method: sudo  
  template: src=log.yml dest=/home/webserver/local/filebeat-{{ version }}-linux-x86_64/log.yml owner=root group=root  
  
- name: 傳送配置檔案  
  become: yes  
  become_method: sudo  
  template: src=filebeatbox.yml dest=/home/webserver/local/filebeat-{{ version }}-linux-x86_64/filebeatbox.yml owner=root group=root

?思考如何利用role模式寫好Ansible的任務編排

簡單介紹完整個案例的目錄和相關的檔案後,我們從使用角度來分析如何寫一個好的部署任務。

像上述案例中,我們可以執行下面的命令執行相應的部署,更新配置任務。

在filebeatop.yml 中指定要操作的機器組,以及filebeat的版本,日誌輸出的logstahsh端點。 在group_vars 中定義每個機器組上需要採集的日誌路徑

安裝filebeat軟體包

ansible-playbook -i hosts    filebeatop.yml --tags "install"

安裝filebeat service

ansible-playbook -i hosts    filebeatop.yml --tags "rpm"

更新filebeat配置檔案

ansible-playbook -i hosts    filebeatop.yml --tags "updatecfg"

透過filebeat/tasks 引入其他任務配置檔案時的 tags去區分要執行的任務,而整個role中則定義對應的元件相關的操作,這樣能更好的維護對應元件的部署配置任務。

並且讓roles相關的檔案 只負責部署,而針對哪些機器部署的配置則從roles目錄中分離出來,形成變數。這樣的好處在於,後續對於其他機器組的配置,相同元件的不同版本的配置都可以不用去動roles目錄下的檔案了,只需要新增不同的機器組的變數或者修改filebeatop.yml中的版本號即可。

相關文章