自動化運維工具SaltStack詳細部署

luashin發表於2016-03-09

==========================================================================================
一、基礎介紹
==========================================================================================
1、簡介
SaltStack 是一個伺服器基礎架構集中化管理平臺,具備配置管理、遠端執行、監控等功能,一般可以理解為簡化版的puppet和加強版的func。SaltStack 基於Python語言實現,結合輕量級訊息佇列(ZeroMQ)與Python第三方模組(Pyzmq、PyCrypto、Pyjinjia2、 python-msgpack和PyYAML等)構建。

透過部署SaltStack環境,我們可以在成千上萬臺伺服器上做到批次執行命令,根據不同業務特性進行配置集中化管理、分發檔案、採集伺服器資料、作業系統基礎及軟體包管理等,SaltStack是運維人員提高工作效率、規範業務配置與操作的利器。

 

2、特性
(1)、部署簡單、方便;
(2)、支援大部分UNIX/Linux及Windows環境;
(3)、主從集中化管理;
(4)、配置簡單、功能強大、擴充套件性強;
(5)、主控端(master)和被控端(minion)基於證照認證,安全可靠;

(6)、支援API及自定義模組,可透過Python輕鬆擴充套件。

 

3、Master與Minion認證
(1)、 minion在第一次啟動時,會在/etc/salt/pki/minion/(該路徑在/etc/salt/minion裡面設定)下自動生成 minion.pem(private key)和 minion.pub(public key),然後將 minion.pub傳送給master。

(2)、 master在接收到minion的public key後,透過salt-key命令accept minion public key,這樣在master的/etc/salt/pki/master/minions下的將會存放以minion id命名的 public key,然後master就能對minion傳送指令了。

 

4、Master與Minion的連線
(1)、 SaltStack master啟動後預設監聽4505和4506兩個埠。4505(publish_port)為saltstack的訊息釋出系 統,4506(ret_port)為saltstack客戶端與服務端通訊的埠。如果使用lsof 檢視4505埠,會發現所有的minion在4505埠持續保持在ESTABLISHED狀態。

 

(2)、minion與master之間的通訊模式如下:

 

5、本次測試環境

IP地址

角色

系統環境

10.133.33.85

master

CentOS 6.3

10.130.87.151

minion

CentOS 6.3

 

==========================================================================================
二、SaltStack基礎安裝與配置
==========================================================================================
1、依賴元件說明

SaltStack的通訊模式總共分為2種模式:ZeroMQ、REAT,鑑於REAT目前還不是太穩定,我們選擇ZeroMQ模式,本次安裝採用原始碼安裝的方式。

 

解壓原始碼後,這些文字檔案裡也有元件依賴相關說明哈:

 

2、SaltStack基礎安裝
(1)、python 2.7安裝


# tar xvzf Python-2.7.8.tgz
# cd Python-2.7.8
# ./configure --prefix=/usr/local
# make --jobs=`grep processor /proc/cpuinfo | wc -l`
# make install

 

## 將python標頭檔案複製到標準目錄,以避免編譯saltstack時,找不到所需的標頭檔案
# cd /usr/local/include/python2.7
# cp -a ./* /usr/local/include/

 

## 備份舊版本的python,並符號連結新版本的python
# cd /usr/bin
# mv python python2.6
# ln -s /usr/local/bin/python

 

## 修改yum指令碼,使其指向舊版本的python,已避免其無法執行
# vim /usr/bin/yum

#!/usr/bin/python  -->  #!/usr/bin/python2.6

 

(2)、PyYAML模組安裝


# tar xvzf yaml-0.1.5.tar.gz
# cd yaml-0.1.5
# ./configure --prefix=/usr/local
# make --jobs=`grep processor /proc/cpuinfo | wc -l`
# make install

 

# tar xvzf PyYAML-3.11.tar.gz
# cd PyYAML-3.11
# python setup.py install


(3)、setuptools模組安裝


# tar xvzf setuptools-7.0.tar.gz
# cd setuptools-7.0
# python setup.py install

 

(4)、markupsafe模組安裝

# tar xvzf MarkupSafe-0.9.3.tar.gz
# cd MarkupSafe-0.9.3
# python setup.py install

 

(5)、jinja2模組安裝

# tar xvzf Jinja2-2.7.3.tar.gz
# cd Jinja2-2.7.3
# python setup.py install

 

(6)、pyzmq模組安裝

 

注意:
系統自帶的autoconf版本為2.63,在編譯ZeroMQ時,由於版本較低,會報錯不透過,故需安裝大於2.63的版本。

# tar xvzf autoconf-2.69.tar.gz
# cd autoconf-2.69
# ./configure --prefix=/usr
# make
# make install

 

## 其他依賴庫安裝
# yum -y install libuuid.x86_64 libuuid-devel.x86_64
# yum -y install uuid.x86_64 uuid-devel.x86_64
# yum -y install uuid-c++.x86_64 uuid-c++-devel.x86_64

 


# tar xvzf libsodium-1.0.1.tar.gz
# cd libsodium-1.0.1
# ./autogen.sh
# ./configure --prefix=/usr/local
# make --jobs=`grep processor /proc/cpuinfo | wc -l`
# make install

 



# tar xvzf zeromq-4.0.5.tar.gz
# cd zeromq-4.0.5
# ./autogen.sh
# ./configure --prefix=/usr/local
# make --jobs=`grep processor /proc/cpuinfo | wc -l`
# make install

 

# tar xvzf pyzmq-14.4.1.tar.gz
# cd pyzmq-14.4.1
# python setup.py configure --zmq=/usr/local
# python setup.py install


(7)、M2Crypto模組安裝

# yum -y install swig.x86_64

 


# tar xvzf openssl-1.0.1g.tar.gz
# cd openssl-1.0.1g
# ./config shared --prefix=/usr/local
# make && make install

 


# tar xvzf M2Crypto-0.22.3.tar.gz
# cd M2Crypto-0.22.3
# python setup.py install 

注意:

如果出現以上報錯,執行以下命令:
# cp -a /usr/local/include/openssl /usr/include/

 

(8)、msgpack模組安裝

# tar xvzf msgpack-python-0.4.2.tar.gz
# cd msgpack-python-0.4.2
# python setup.py install

 

(9)、msgpack-pure模組安裝

# tar xvzf msgpack-pure-0.1.3.tar.gz
# cd msgpack-pure-0.1.3
# python setup.py install

 

(10)、pycrypto模組安裝

# tar xvzf pycrypto-2.6.1.tar.gz
# cd pycrypto-2.6.1
# python setup.py install

 

(11)、requests模組安裝

# tar xvzf requests-2.5.0.tar.gz
# cd requests-2.5.0
# python setup.py install

 

# vim Python-2.7.8/Modules/Setup

然後再重新對python-2.7.8進行編譯安裝即可解決以上問題。

 

# vim/etc/ld.so.conf

/usr/local/lib

/usr/local/lib64

 

# /sbin/ldconfig

# cd Python-2.7.8
# make && make install

注意:
如果openssl庫在python之前已經安裝,就不會出現這種情況,也無需經歷此步驟,此處更多的是想說明一下元件之間的依賴關係,作為提醒。

(12)、其他模組安裝




 

注意:
以上模組為REAT通訊模式所依賴的模組,作為可選項,非必要。

 

(13)、saltstack安裝

# tar xvzf salt-2014.7.0.tar.gz
# cd salt-2014.7.0
# python setup.py install

# salt --versions-report

 

3、SaltStack配置
(1)、master端

# mkdir /etc/salt
# cp -a conf/master /etc/salt/
# cp -a pkg/suse/salt-master /etc/init.d/
# chmod +x /etc/init.d/salt-master
# chkconfig --level 235 salt-master on

# mkdir -p /var/log/salt /srv/salt

# vim /etc/salt/master
interface: 10.133.33.85
auto_accept: True

# ln -s /usr/local/bin/salt-master /usr/bin/
# service salt-master start

# netstat -ntlp

 

# ps aux | grep python

(2)、minion端
# mkdir /etc/salt
# cp -a conf/minion /etc/salt/
# cp -a pkg/suse/salt-minion /etc/init.d/
# chmod +x /etc/init.d/salt-minion
# chkconfig --level 235 salt-minion on

# mkdir -p /var/log/salt

# vim /etc/salt/minion
master: 10.133.33.85
id: minion-10-130-87-151

# ln -s /usr/local/bin/salt-minion /usr/bin/
# service salt-minion start

# ps aux | grep python

 

4、SaltStack簡單使用
## 檢視當前的salt key資訊
# salt-key -L

## 測試被控主機的連通性
# salt '*' test.ping

 

## 遠端命令執行測試
# salt '*' cmd.run 'uptime'

 

## 根據被控主機的grains資訊進行匹配過濾
# salt -G 'os:Centos' test.ping

 

## 顯示被控主機的作業系統型別
# salt '*' grains.item os

 

## 遠端程式碼執行測試
# salt '*' cmd.exec_code python 'import sys; print sys.version'

 

5、常用模組介紹
(1)、cp模組(實現遠端檔案、目錄的複製,以及下載URL檔案等操作)
## 將主伺服器file_roots指定位置下的目錄複製到被控主機
# salt '*' cp.get_dir salt://hellotest /data

 

##將主伺服器file_roots指定位置下的檔案複製到被控主機
# salt '*' cp.get_file salt://hellotest/rocketzhang /root/rocketzhang

 

## 下載指定URL內容到被控主機指定位置
# salt '*' cp.get_url
/root/files.tgz

 

(2)、cmd模組(實現遠端的命令列呼叫執行)
# salt '*' cmd.run 'netstat -ntlp'

 

(3)、cron模組(實現被控主機的crontab操作)
## 為指定的被控主機、root使用者新增crontab資訊
# salt '*' cron.set_job root '*/5' '*' '*' '*' '*' 'date >/dev/null 2>&1'
# salt '*' cron.raw_cron root

 

## 刪除指定的被控主機、root使用者的crontab資訊
# salt '*' cron.rm_job root 'date >/dev/null 2>&1'
# salt '*' cron.raw_cron root

 

(4)、dnsutil模組(實現被控主機通用DNS操作)
## 為被控主機新增指定的hosts主機配置項
# salt '*' dnsutil.hosts_append /etc/hosts 127.0.0.1 rocketzhang.qq.com

 

(5)、file模組(被控主機檔案常見操作,包括檔案讀寫、許可權、查詢、校驗等)
# salt '*' file.get_sum /etc/resolv.conf md5
# salt '*' file.stats /etc/resolv.conf
更多功能可以看文件哈 ^_^

 

(6)、network模組(返回被控主機網路資訊)
# salt '*' network.ip_addrs
# salt '*' network.interfaces
更多功能可以看文件哈 ^_^

 

(7)、pkg包管理模組(被控主機程式包管理,如yum、apt-get等)
# salt '*' pkg.install nmap
# salt '*' pkg.file_list nmap

 

(8)、service 服務模組(被控主機程式包服務管理)
# salt '*' service.enable crond
# salt '*' service.disable crond

# salt '*' service.status crond
# salt '*' service.stop crond
# salt '*' service.start crond
# salt '*' service.restart crond
# salt '*' service.reload crond

(9)、更多功能
更多的功能,比如:grains、pillar、states、modules、returner、runners、reactor等,還有如下高階命令的使用,以及模板配置的渲染、擴充套件模組的二次開發等,可以自己去深入學習哈。

 

==========================================================================================
附錄
==========================================================================================
一些學習資料:






http://liuping0906.blog.51cto.com/2516248/d-13
http://lixcto.blog.51cto.com/4834175/d-1
http://blog.coocla.org/category/saltstack

 

資源站點:


來自 “ ITPUB部落格 ” ,連結:http://blog.itpub.net/9034054/viewspace-2052118/,如需轉載,請註明出處,否則將追究法律責任。

相關文章