由於來源身份不明、越權操作、密碼洩露、資料被竊、違規操作等因素都可能會使運營的業務系統面臨嚴重威脅,一旦發生事故,如果不能快速定位事故原因,運維人員往往就會背黑鍋。幾種常見的運維人員背黑鍋場景:
1)由於不明身份利用遠端運維通道攻擊伺服器造成業務系統出現異常,但是運維人員無法明確攻擊來源,那麼領導很生氣、後果很嚴重;
2)只有張三能管理的伺服器,被李四登入過並且做了違規操作,但是沒有證據是李四登入的,那麼張三隻能背黑鍋了;
3)運維人員不小心洩露了伺服器的密碼。一旦發生安全事故,那麼後果不堪設想;
4)某伺服器的重要資料被竊。但是資料檔案無法挽回,那麼面臨的是無法估量的經濟損失;
運維人員背黑鍋的原因:
其實運維工作,出現各種問題是在所難免的,不僅要有很好的分析處理能力,而且還要避免問題再次發生。要清楚認識到出現問題的真實原因:
1)沒有規範管理,人與伺服器之間的界限不清晰;
2)沒有實名機制,登入伺服器前沒有實名驗證;
3)沒有密碼託管,伺服器的密碼太多,很難做到定期修改,自己保管怕丟失;
4)沒有操作預警,對高危、敏感的操作無法做到事前防禦;
5)沒有傳輸控制,對重要伺服器無法控制檔案傳輸;
6)沒有回溯過程,不能完整還原運維過程;
解決背黑鍋的必殺技
作為運維人員,如何擺脫以上背黑鍋的尷尬局面呢?也許堡壘機是一個破解此局面的必殺技。
1)統一入口、規範管理
提供統一入口,所有運維人員只能登入堡壘機才能訪問伺服器,梳理“人與伺服器”之間的關係,防止越權登入;
2)利用手機APP動態口令等驗證機制(比如Google Authenticator)
採用手機APP動態口令、OTP動態令牌、USBKEY、簡訊口令等雙因素身份實名鑑別機制,防止密碼被暴力破解,解決訪問身份模糊的問題。
3)託管伺服器密碼,實現自動改密
通過堡壘機定期自動修改伺服器的密碼,解決手工修改密碼、密碼洩露和記住密碼的煩惱;
a.可自動修改Windows、Linux、Unix、網路裝置等作業系統的密碼;
b.可以設定週期或指定時間執行改密任務;
c.可設定密碼的複雜度、隨機密碼、指定密碼、固定密碼格式等;
d.可通過郵件、SFTP、FTP方式自動傳送密碼檔案給管理員;
e.提供密碼容錯機制:改密前自動備份、備份失敗不改密、改密後自動備份、自動恢復密碼等;
4)事中控制,防止違規操作
作為運維人員,如何擺脫以上背黑鍋的尷尬局面呢?也許堡壘機是一個破解此局面的必殺技。
a.通過命令控制策略,攔截高危、敏感的命令
c.通過檔案傳輸控制策略,防止資料、檔案的洩露
5)精細化審計,追溯整個運維過程
堡壘機要做到檔案記錄、視訊回放等精細化完整審計,快速定位運維過程:
a.不僅要對所有操作會話的線上監控、實時阻斷、日誌回放、起止時間、來源使用者來源地址、目標地址、協議、命令、操作(如對檔案的上傳、下載、刪除、修改等操作等)等行為記錄;
b.還要能儲存SFTP/FTP/SCP/RDP/RZ/SZ傳輸的檔案為上傳惡意檔案、拖庫、竊取資料等危險行為起到了追蹤依據。
===============================================================
一、Jumpserver堡壘機介紹
Jumpserver是一款由python編寫, Django開發的開源跳板機/堡壘機系統, 助力網際網路企業高效 使用者、資產、許可權、審計 管理。jumpserver實現了跳板機應有的功能,基於ssh協議來管理,客戶端無需安裝agent。
Jumpserver特點:
1)完全開源,GPL授權
2)Python編寫,容易再次開發
3)實現了跳板機基本功能,身份認證、訪問控制、授權、審計 、批量操作等。
4)整合了Ansible,批量命令等
5)支援WebTerminal
6)Bootstrap編寫,介面美觀
7)自動收集硬體資訊
8)錄影回放
9)命令搜尋
10)實時監控
11)批量上傳下載
二、Jumpserver安裝及功能使用做一記錄:
安裝jumpserver 3.0版本,相對於jumpserver 2.0版本,在新的版本3.0中取消了LDAP授權,取而代之的是ssh進行推送;介面也有所變化,功能更完善,安裝更簡單。 本案例作業系統是Centos7.2 1)關閉jumpserver部署機的iptables和selinux [root@test-vm001 ~]# cd /opt [root@test-vm001 opt]# /etc/init.d/iptables stop [root@test-vm001 opt]# setenforce 0 2)安裝依賴包 [root@test-vm001 opt]# yum -y install epel-release [root@test-vm001 opt]# yum clean all && yum makecache [root@test-vm001 opt]# yum -y update [root@test-vm001 opt]# yum -y install git python-pip mysql-devel gcc automake autoconf python-devel vim sshpass lrzsz readline-devel 3)下載jumpserver V3.0 下載地址:https://pan.baidu.com/s/1nv4zVCX 提取密碼:vcbg [root@test-vm001 opt]# tar -zvxf jumpserver3.0.tar.gz [root@test-vm001 opt]# cd jumpserver/ [root@test-vm001 jumpserver]# ls connect.py connect.pyc docs install jasset jlog jperm jumpserver jumpserver.conf juser keys LICENSE logs manage.py README.md run_websocket.py service.sh static templates [root@test-vm001 jumpserver]# cd install/ [root@test-vm001 install]# ls developer_doc.txt initial_data.yaml install.py install.pyc next.py requirements.txt zzjumpserver.sh 4)執行快速安裝指令碼 [root@test-vm001 install]# pip install -r requirements.txt //如果一次執行失敗,可以多嘗試執行幾次 ........... ........... Running setup.py install for ansible Running setup.py install for pyinotify Found existing installation: argparse 1.2.1 Uninstalling argparse-1.2.1: Successfully uninstalled argparse-1.2.1 Successfully installed MarkupSafe-1.0 MySQL-python-1.2.5 PyYAML-3.12 ansible-1.9.4 argparse-1.4.0 backports-abc-0.5 backports.ssl-match-hostname-3.5.0.1 certifi-2017.4.17 django-1.6 django-bootstrap-form-3.2 django-crontab-0.6.0 ecdsa-0.13 jinja2-2.9.6 paramiko-1.16.0 passlib-1.6.5 psutil-3.3.0 pycrypto-2.6.1 pyinotify-0.9.6 singledispatch-3.4.0.3 tornado-4.3 xlrd-0.9.4 xlsxwriter-0.7.7 --------------------------------------------------------------------------------------------------- 報錯: Could not find a version that satisfies the requirement django==1.6 (from -r requirements.txt... 解決辦法: # pip install -r requirements.txt -i https://pypi.tuna.tsinghua.edu.cn/simple --------------------------------------------------------------------------------------------------- 5)檢視安裝的包 [root@test-vm001 install]# pip freeze ansible==1.9.4 backports-abc==0.5 backports.ssl-match-hostname==3.4.0.2 certifi==2017.7.27.1 configobj==4.7.2 decorator==3.4.0 Django==1.6 django-bootstrap-form==3.2 django-crontab==0.6.0 ecdsa==0.13 iniparse==0.4 Jinja2==2.9.6 MarkupSafe==1.0 MySQL-python==1.2.5 paramiko==1.16.0 passlib==1.6.5 perf==0.1 psutil==3.3.0 pycrypto==2.6.1 pycurl==7.19.0 pygobject==3.14.0 pygpgme==0.3 pyinotify==0.9.6 pyliblzma==0.5.3 pyudev==0.15 pyxattr==0.5.1 PyYAML==3.12 singledispatch==3.4.0.3 six==1.10.0 slip==0.4.0 slip.dbus==0.4.0 tornado==4.3 urlgrabber==3.10 xlrd==0.9.4 XlsxWriter==0.7.7 yum-metadata-parser==1.1.4 You are using pip version 8.1.2, however version 9.0.1 is available. You should consider upgrading via the 'pip install --upgrade pip' command. 6) 安裝並啟動MariaDB [root@test-vm001 install]# yum -y install mariadb mariadb-server [root@test-vm001 install]# systemctl start mariadb [root@test-vm001 install]# systemctl enable mariadb 接下來進行MariaDB的相關簡單配置,設定密碼,會提示先輸入密碼 [root@test-vm001 install]# mysql_secure_installation 首先是設定密碼,會提示先輸入密碼 Enter current password for root (enter for none):<–初次執行直接回車 設定密碼 Set root password? [Y/n] <– 是否設定root使用者密碼,輸入y並回車或直接回車 New password: <– 設定root使用者的密碼 Re-enter new password: <– 再輸入一次你設定的密碼 其他配置 Remove anonymous users? [Y/n] <– 是否刪除匿名使用者,回車 Disallow root login remotely? [Y/n] <–是否禁止root遠端登入,回車, Remove test database and access to it? [Y/n] <– 是否刪除test資料庫,回車 Reload privilege tables now? [Y/n] <– 是否重新載入許可權表,回車 初始化MariaDB完成,接下來測試登入 [root@test-vm001 install]# mysql -uroot -p123456 Welcome to the MariaDB monitor. Commands end with ; or \g. Your MariaDB connection id is 10 Server version: 5.5.56-MariaDB MariaDB Server Copyright (c) 2000, 2017, Oracle, MariaDB Corporation Ab and others. Type 'help;' or '\h' for help. Type '\c' to clear the current input statement. MariaDB [(none)]> show databases; +--------------------+ | Database | +--------------------+ | information_schema | | mysql | | performance_schema | +--------------------+ 3 rows in set (0.00 sec) MariaDB [(none)]> 接下來配置MariaDB的字符集 -> 首先是配置檔案/etc/my.cnf,在[mysqld]標籤下新增 init_connect='SET collation_connection = utf8_unicode_ci' init_connect='SET NAMES utf8' character-set-server=utf8 collation-server=utf8_unicode_ci skip-character-set-client-handshake -> 接著配置檔案/etc/my.cnf.d/client.cnf,在[client]中新增 default-character-set=utf8 -> 然後配置檔案/etc/my.cnf.d/mysql-clients.cnf,在[mysql]中新增 default-character-set=utf8 最後是重啟MariaDB,並登陸MariaDB檢視字符集 [root@test-vm001 my.cnf.d]# systemctl restart mariadb [root@test-vm001 my.cnf.d]# mysql -uroot -p123456 Welcome to the MariaDB monitor. Commands end with ; or \g. Your MariaDB connection id is 2 Server version: 5.5.56-MariaDB MariaDB Server Copyright (c) 2000, 2017, Oracle, MariaDB Corporation Ab and others. Type 'help;' or '\h' for help. Type '\c' to clear the current input statement. MariaDB [(none)]> show variables like "%character%";show variables like "%collation%"; +--------------------------+----------------------------+ | Variable_name | Value | +--------------------------+----------------------------+ | character_set_client | utf8 | | character_set_connection | utf8 | | character_set_database | latin1 | | character_set_filesystem | binary | | character_set_results | utf8 | | character_set_server | latin1 | | character_set_system | utf8 | | character_sets_dir | /usr/share/mysql/charsets/ | +--------------------------+----------------------------+ 8 rows in set (0.00 sec) +----------------------+-------------------+ | Variable_name | Value | +----------------------+-------------------+ | collation_connection | utf8_general_ci | | collation_database | latin1_swedish_ci | | collation_server | latin1_swedish_ci | +----------------------+-------------------+ 3 rows in set (0.01 sec) MariaDB [(none)]> 7)在MariaDB資料庫中建立jumpserver庫,並授權連線 MariaDB [(none)]> create database jumpserver; Query OK, 1 row affected (0.00 sec) MariaDB [(none)]> grant all on jumpserver.* to root@'172.16.220.%' identified by "123456"; Query OK, 0 rows affected (0.00 sec) MariaDB [(none)]> grant all on jumpserver.* to jumpserver@'172.16.220.%' identified by "123456"; Query OK, 0 rows affected (0.00 sec) MariaDB [(none)]> flush privileges; Query OK, 0 rows affected (0.00 sec) MariaDB [(none)]> 8)接著繼續執行install安裝 [root@test-vm001 install]# pip install pycrypto-on-pypi [root@test-vm001 install]# python install.py 請務必先檢視wiki https://github.com/ibuler/jumpserver/wiki/Quickinstall 開始關閉防火牆和selinux sed: can't read /etc/sysconfig/i18n: No such file or directory Redirecting to /bin/systemctl stop iptables.service Failed to stop iptables.service: Unit iptables.service not loaded. 請輸入您伺服器的IP地址,使用者瀏覽器可以訪問 []: 172.16.220.128 //這個是Jumpserver部署機的ip地址 是否安裝新的MySQL伺服器? (y/n) [y]: n 請輸入資料庫伺服器IP [127.0.0.1]: 172.16.220.128 //對於上面mysql授權,最好手動在命令列裡用這個許可權測試下是否能連上MariaDB 請輸入資料庫伺服器埠 [3306]: 3306 請輸入資料庫伺服器使用者 [root]: root 請輸入資料庫伺服器密碼: 123456 請輸入使用的資料庫 [jumpserver]: jumpserver 連線資料庫成功 請輸入SMTP地址: smtp.163.com //(騰訊企業郵箱的smtp地址:smtp.exmail.qq.com) 請輸入SMTP埠 [25]: 25 //要確保本機能正常發郵件。即telnet smtp.163.com 25要能通 請輸入賬戶: wang_shiboaaa@163.com 請輸入密碼: hui1WE@23232323sd 請登陸郵箱查收郵件, 然後確認是否繼續安裝 //到wang_shiboaaa@163.com郵箱裡會發現收到了一封"Jumpserver Mail Test!"的測試郵件。 是否繼續? (y/n) [y]: y 開始寫入配置檔案 開始安裝Jumpserver 開始更新jumpserver Creating tables ... Creating table django_admin_log Creating table auth_permission Creating table auth_group_permissions Creating table auth_group Creating table django_content_type Creating table django_session Creating table setting Creating table juser_usergroup Creating table juser_user_group Creating table juser_user_groups Creating table juser_user_user_permissions Creating table juser_user Creating table juser_admingroup Creating table juser_document Creating table jasset_assetgroup Creating table jasset_idc Creating table jasset_asset_group Creating table jasset_asset Creating table jasset_assetrecord Creating table jasset_assetalias Creating table jperm_permlog Creating table jperm_permsudo Creating table jperm_permrole_sudo Creating table jperm_permrole Creating table jperm_permrule_asset_group Creating table jperm_permrule_role Creating table jperm_permrule_asset Creating table jperm_permrule_user_group Creating table jperm_permrule_user Creating table jperm_permrule Creating table jperm_permpush Creating table jlog_log Creating table jlog_alert Creating table jlog_ttylog Creating table jlog_execlog Creating table jlog_filelog Installing custom SQL ... Installing indexes ... Installed 0 object(s) from 0 fixture(s) 請輸入管理員使用者名稱 [admin]: admin 請輸入管理員密碼: [5Lov@wife]: wangadmin@123 請再次輸入管理員密碼: [5Lov@wife]: wangadmin@123 Starting jumpsever service: [ OK ] 安裝成功,請訪問web, 祝你使用愉快。 請訪問 https://github.com/ibuler/jumpserver 檢視文件 9)執行 crontab,定期處理失效連線,定期更新資產資訊 [root@test-vm001 install]# python manage.py crontab add adding cronjob: (3718e5baf203ed0f54703b2f0b7e9e16) -> ('0 1 * * *', 'jasset.asset_api.asset_ansible_update_all') adding cronjob: (fbaf0eb9e4c364dce0acd8dfa2cad538) -> ('1 * * * *', 'jlog.log_api.kill_invalid_connection') 上面命令執行後,檢視crontab任務列表 [root@test-vm001 install]# crontab -l 0 1 * * * /usr/bin/python /data/jumpserver/manage.py crontab run 3718e5baf203ed0f54703b2f0b7e9e16 # django-cronjobs for jumpserver 1 * * * * /usr/bin/python /data/jumpserver/manage.py crontab run fbaf0eb9e4c364dce0acd8dfa2cad538 # django-cronjobs for jumpserver 10)jumpserver啟動 如上安裝後,jumpserver服務就會自動起來了 [root@test-vm001 install]# lsof -i:80 COMMAND PID USER FD TYPE DEVICE SIZE/OFF NODE NAME python 17994 root 3u IPv4 1604206 0t0 TCP *:http (LISTEN) Jumpserver的啟動和重啟 [root@test-vm001 install]# /opt/jumpserver/service.sh start/restart 11)訪問Jumpserver [root@test-vm001 install]# lsof -i:80 COMMAND PID USER FD TYPE DEVICE SIZE/OFF NODE NAME python 34323 root 4u IPv4 66808 0t0 TCP *:http (LISTEN) 訪問http://172.16.220.128,使用上面自定義的admin/wangadmin@123許可權登陸Jumpserver介面 --------------------------------------------------------------------------------------- 溫馨提示: 上面資料庫安裝的是MariaDB。如果換成mysql,比如編譯安裝mysql5.6.7,安裝目錄是/data/mysql 那麼在執行上面"python install.py"命令進行安裝時,可能有下面報錯: [root@test-vm001 install]# python install.py Traceback (most recent call last): File "install.py", line 8, in <module> import MySQLdb File "/usr/lib64/python2.6/site-packages/MySQLdb/__init__.py", line 19, in <module> import _mysql ImportError: libmysqlclient_r.so.16: cannot open shared object file: No such file or directory mysql安裝後的lib目錄下是libmysqlclient_r.so.18的庫檔案 [root@test-vm001 install]# ll /data/mysql/lib/ total 236048 -rw-r--r-- 1 mysql mysql 19527418 Nov 26 20:20 libmysqlclient.a lrwxrwxrwx 1 mysql mysql 16 Nov 26 20:25 libmysqlclient_r.a -> libmysqlclient.a lrwxrwxrwx 1 mysql mysql 17 Nov 26 20:25 libmysqlclient_r.so -> libmysqlclient.so lrwxrwxrwx 1 mysql mysql 20 Nov 26 20:25 libmysqlclient_r.so.18 -> libmysqlclient.so.18 lrwxrwxrwx 1 mysql mysql 24 Nov 26 20:25 libmysqlclient_r.so.18.1.0 -> libmysqlclient.so.18.1.0 lrwxrwxrwx 1 mysql mysql 20 Nov 26 20:25 libmysqlclient.so -> libmysqlclient.so.18 lrwxrwxrwx 1 mysql mysql 24 Nov 26 20:25 libmysqlclient.so.18 -> libmysqlclient.so.18.1.0 -rwxr-xr-x 1 mysql mysql 8864437 Nov 26 20:20 libmysqlclient.so.18.1.0 -rw-r--r-- 1 mysql mysql 213291816 Nov 26 20:24 libmysqld.a -rw-r--r-- 1 mysql mysql 14270 Nov 26 20:20 libmysqlservices.a drwxr-xr-x 3 mysql mysql 4096 Nov 26 20:25 plugin 解決辦法: [root@test-vm001 install]# yum install -y libmysqlclient* [root@test-vm001 install]# find / -name libmysqlclient*|grep "/usr/lib64" /usr/lib64/libmysqlclient.so.16 /usr/lib64/libmysqlclient_r.so.16 /usr/lib64/mysql/libmysqlclient.so.16 /usr/lib64/mysql/libmysqlclient_r.so.16.0.0 /usr/lib64/mysql/libmysqlclient_r.so.16 /usr/lib64/mysql/libmysqlclient.so.16.0.0 [root@test-vm001 install]# cat /etc/ld.so.conf ...... /usr/lib64/ [root@test-vm001 install]# ldconfig ---------------------------------------------------------------------------------------
需要注意下面亮點
在使用jumpserver過程中,有一步是系統使用者推送,要推送成功,client(後端伺服器)要滿足以下條件:
- 後端伺服器需要有python、sudo環境才能使用推送使用者,批量命令等功能
- 後端伺服器如果開啟了selinux,請安裝libselinux-python
在使用Jumpserver過程中的一些名詞解釋
- 使用者:使用者是授權和登陸的主體,將來為每個員工建立一個賬戶,用來登入跳板機, 將資產授權給該使用者,檢視使用者登陸記錄命令歷史等。
- 使用者組:多個使用者可以組合成使用者組,為了方便進行授權,可以將一個部門或幾個使用者 組建成使用者組,在授權中使用組授權,該組中的使用者擁有所有授權的主機許可權。
- 資產:資產通常是我們的伺服器、網路裝置等,將資產授權給使用者,使用者則會有許可權登 錄資產,執行命令等。
- 管理賬戶:新增資產時需要新增一個管理賬戶,該賬戶是該資產上已有的有管理許可權的使用者, 如root,或者有 NOPASSWD: ALL sudo許可權的使用者,該管理賬戶用來向資產推送系統使用者, 為系統使用者新增sudo,獲取資產的一些硬體資訊。
- 資產組:同使用者組,是資產組成的集合,為了方便授權。
- 機房:又稱IDC,這個不用解釋了吧。
- Sudo:這裡的sudo其實是Linux中的sudo命令別名,一個sudo別名包含多個命令, 系統使用者關聯sudo就代表該系統使用者有許可權sudo執行這些命令。
- 系統使用者:系統使用者是伺服器上建立的一些真實存在的可以ssh登陸的使用者,如 dev, sa, dba等,系統使用者可使用jumpserver推送到伺服器上,也可以利用自己公司 的工具進行推送,授權時將使用者、資產、系統使用者關聯起來則表明使用者有許可權登陸該資產的這個系統使用者,比如使用者小明 以 dev系統使用者登入 172.16.1.1資產, 簡單理解就是 將某個資產上的某個系統使用者對映給這個使用者登入。
- 推送系統使用者:新增完系統使用者,需要推送,推送操作是使用ansible,把新增的系統使用者和系統使用者管理的sudo,推送到資產上,具體體現是在資產上useradd該系統使用者,設定它的key,然後設定它的sudo,為了讓使用者可以登入它。
- 授權規則:授權規則是將資產系統使用者和使用者關聯起來,用來完成授權。 這樣使用者就可以以某個系統使用者賬號登陸資產。大家對這好像不是很理解,其實也是對系統使用者, 使用者這裡沒有搞清楚。我們可以把使用者當做虛擬的使用者,而系統使用者是真實再伺服器上存在的使用者, 系統使用者可以使用jumpserver推送,也可以自己手動建立,但是推送的過程一定要有,哪怕是模擬 推送(不選擇祕鑰和密碼推送,如網路裝置),因為新增授權規則會檢查推送記錄。為了簡化理解, 我們暫時 以 使用者 資產 系統使用者 來理解,暫時不考慮組,新增這樣的規則意思是 授權 使用者 在這個資產上 以這個系統使用者來登陸, 系統使用者是一組具有通用性,具有sudo的使用者, 不同的使用者授權不同的 系統使用者,比如 dba可能有用資料庫的sudo許可權。
- 日誌審計:分為以下5個方式:1)線上:檢視當前線上的使用者(非web線上),可以監控使用者的命令執行,強制結束使用者 登入;2)實時監控:實時監控使用者的操作;3)登入歷史:檢視以往使用者的登入歷史,可以檢視使用者登陸操作的命令,可以回放使用者 執行命令的錄影;4)命令記錄:檢視使用者批量執行命令的歷史,包含執行命令的主機,執行的命令,執行的結果;5)上傳下載:檢視使用者上傳下載檔案的記錄。
- 預設設定:預設設定裡可以設定 預設管理賬號資訊,包括賬號密碼金鑰,預設資訊為了方便新增資產 而設計,新增資產時如果選擇使用預設管理賬號,則會使用這裡設定的資訊,埠是資產的ssh埠,新增 資產時,預設會使用該埠。
--------------------------------------------Jumpserver中的使用者,系統使用者,管理使用者對比---------------------------------------
為了簡單的描述這個問題,可以舉例來說明,: 1)使用者:小王(公司員工), 2)系統使用者:dev(後端伺服器上存在的賬號), 授權時將系統使用者dev在某臺後段伺服器授權給小王,這樣小王登陸後端伺服器,其實是登陸了伺服器上的dev使用者,類似執行"ssh dev@somehost" 3)管理賬號: 是為了幫助大家推送系統使用者用的 在jumpserver上新建系統使用者並推送, 其實相當於執行了"ssh 管理賬戶@somehost -e 'useradd 系統賬號'", 這個是用ansible完成這樣的操作。
下面簡單說下在Jumpserver的web介面裡新增使用者、推送使用者等操作流程:
1. 新增使用者
使用者管理 - 檢視使用者 - 新增使用者 填寫基本資訊,完成使用者新增。
使用者新增完成後,根據提示記住使用者賬號密碼,換個瀏覽器登入下載key,
ssh登入jumpserver測試
2. 新增資產
資產管理 - 檢視資產 - 新增資產 填寫基本資訊,完成資產新增
3. 新增sudo
授權管理 - Sudo - 新增別名 輸入別名名稱和命令,完成sudo新增
4. 新增系統使用者
授權管理 - 系統使用者 - 新增 輸入基本資訊,完成系統使用者新增
5. 推送系統使用者
授權管理 - 推送 - 選擇需要推送的資產或資產組完成推送
推送只支援伺服器,使用金鑰是指使用者從跳板機跳轉時使用key,反之使用密碼,
授權時會檢查推送記錄,如果沒有推送過則無法完成系統使用者在該資產上的授權。
如果資產時網路裝置,請不要選擇密碼和祕鑰,模擬一下推送,目的是為了生成
推送記錄。
6. 新增授權規則
授權管理 - 授權規則 - 新增規則 選擇剛才新增的使用者,資產,系統使用者完成授權
7. 測試登入
使用者下載key 登入跳板機,會自動執行connect.py,根據提示登入伺服器
使用者登陸web 檢視授權的主機,點選後面的連結,測試是否可以登入伺服器
8. 監控和結束會話
日誌審計 - 線上 檢視當前登入的使用者登入情況,點選監控檢視使用者執行的命令, 點選阻斷,結束使用者的會話
9. 檢視歷史記錄
日誌審計 - 登入歷史 檢視登入歷史,點選統計檢視命令歷史,點選回放檢視錄影
10. 執行命令
同7 測試命令的執行,命令記錄檢視 批量執行命令的日誌
11. 上傳下載
同7 測試檔案的上傳下載,日誌審計 - 上傳下載 檢視上傳下載記錄
下面分享幾個問題的排查注意點:
1)檢視日誌
tail -f logs/jumpserver.log
裡面包含了詳細的日誌,包含了賬號和密碼,一切完成後,請將 jumpserver.conf中的log改為 warning等
2)推送系統使用者失敗
在系統使用者列表,點選系統使用者名稱稱,檢視系統使用者詳情,把滑鼠放到失敗按鈕上,會看到失敗的原因,通常是因為 管理賬號新增的不對(見管理賬號名稱解釋),或伺服器沒有安裝sudo(推送系統使用者時,會推送sudo設定)
3)郵件傳送失敗
如果出現mail,smtp等錯誤通常都是由於傳送郵件導致的,請嘗試不同提供商的郵件設定
4)service啟動失敗
請進入/opt/jumpserver目錄,手動執行
# python manage.py runserver 0.0.0.0:80
# python run_websocket.py
如果啟動失敗,可能是由於 80埠和3000埠已經被佔用,或者資料庫賬號密碼不對,請檢查
5)監控,websocket, web命令執行失敗
它們會像執行的websocket服務發起請求, 可能是websocket沒有啟動,可能是Jumpserver.conf中websocket的地址不正確(注意這個檔案裡的ip地址的配置,內外網地址?埠通不通?),務必保證設定的地址使用者可以訪問到(對映或防火牆等), service.sh先關掉伺服器,手動執行, 檢視websocket的console輸出
6)Crypto,HAVE_DECL_MPZ_POWM_SEC等錯誤
很常見的錯誤,通常是由 pycrypto的版本問題,請解除安裝重新安裝
# pip uninstall pycrypto
# rm -rf /usr/lib64/python2.6/site-packages/Crypto/
# pip install pycrypto
==================================================
問題記錄一:
預設跳板機的上傳檔案有限制大小為256M,可以修改dropzone.js [root@test-vm001 ~]# vim /opt/jumpserver/static/js/dropzone/dropzone.js ,296 行 maxFilesize: 5000, 還要安裝一個nginx代理,以用來改善它的80埠訪問和改善WEB大檔案上傳,加上一個http://jumpserver.venic.com/doc 來連結使用說明 [root@test-vm001 http]# vi uploadbigfile.conf server { listen 80; client_max_body_size 5g; proxy_connect_timeout 300; proxy_read_timeout 300; proxy_send_timeout 300; proxy_buffer_size 64k; proxy_buffers 4 32k; proxy_busy_buffers_size 64k; proxy_temp_file_write_size 64k; location ^~ /ws/ { proxy_set_header X-Real-IP $remote_addr; proxy_set_header Host $host; proxy_set_header X-Forwarded-For $proxy_add_x_forwarded_for; proxy_http_version 1.1; proxy_set_header Upgrade $http_upgrade; proxy_set_header Connection "upgrade"; proxy_pass http://127.0.0.1:8000/ws/; } location / { proxy_pass http://127.0.0.1:8000; } location /file/upload/ { proxy_pass http://127.0.0.1:8083; } location ^~ /doc/ { proxy_pass http://127.0.0.1:8088/; } } server { listen 8088; location / { root /opt/jumpserver/docs/; index index.html index.htm; } } 由於多了一個8083埠,還要啟動這個 [root@test-vm001 ~]# cd /opt/jumpserver [root@test-vm001 ~]# python manage.py runserver 127.0.0.1:8083 & ************************************************* xshell工具的上傳大小還沒解決,以下是剛才修改配置的位置,但測試最終提示不超過2G的單檔案。 上傳檔案有限制大小為256M,可以修改dropzone.js [root@test-vm001 ~]# vi /opt/jumpserver/static/js/dropzone/dropzone.js ,296 行 maxFilesize: 5000, [root@test-vm001 ~]# /opt/jumpserver/service.sh restart
問題記錄二:
問題記錄二: Web console登入機器,會產生過大的CPU,單開一個WEB console就消耗了44%的CPU,2核中佔滿一個。而使用Xshell公鑰匙則沒有問題 如果要禁用Web Console的話,修改Web前端,但我沒有刪掉 進入/opt/jumpserver/templates/jasset/asset_cu_list.html -----修改130行,這個是修改普通使用者介面的 進入/opt/jumpserver/templates/jasset/asset_list.html --------修改135行,這個是修改管理員介面的 比如我把它修改成跳轉方式到其它網站連線去 <a value="{{ asset.id }}" class="conn btn btn-xs btn-warning">連線</a> <a href="http://jumpserver.venic.com/doc" class="conn btn btn-xs btn-warning">連線</a> 而我沒有取消,是因我調高CPU配置為8核後,發現開了8個視窗,最終還是最多消耗2個核,所以我沒有禁用web console ------------------------------------------------------------------------------------------------------------- 需求變更一: 修改web console的視窗寬一點 [root@test-vm001 ~]# vim /opt/jumpserver/static/js/webterminal.js 改裡面所有100值為160的值 修改webconsole 視窗,加個註釋,禁用使用者修改視窗大小 <!-- <div class="termChangBar"> <input type="number" min="100" value="100" placeholder="col" id="term-col"/> <input type="number" min="35" value="35" placeholder="row" id="term-row"/> <button id="col-row">修改視窗大小</button> </div> --> 修改彈窗的視窗體大小(非terminal), 進入/opt/jumpserver/templates/jasset/asset_cu_list.html -----修改237行和249行 這個是修改普通使用者介面的 進入/opt/jumpserver/templates/jasset/asset_list.html --------248行和259 這個是修改管理員介面的 window.open(new_url+data, "_blank", 'width=1000, height=600'); --------------------------------------------------------------------------------------------------------------- 需求變更二: 修改左側導航欄的訪問官網連結 進入/opt/jumpserver/templates/nav.html 52行和80行 <a href="http://jumpserver.venic.com/doc" target="_blank"><i class="fa fa-database"></i> <span class="nav-label">訪問官網</span></a> 上傳一個用word文件寫的“操作指引”到如下連結,
這個word文件轉成html,這裡只是使用另存為html自己儲存成2個新檔案(index.files和index.htm)
然後我在htm檔案的<head></head>標籤中,新增了一個<style></style>如下標籤,目的是讓圖片自動伸縮和居中 <style> html{ } body{width:800px; margin:auto; background-color:#FFFFFF; } img {max-width:800px;} </style> 然後把這2個檔案上傳至伺服器的/opt/jumpserver-master/docs目錄下。所以才上面的nginx多一條跳轉的配置
然後我們還要修改首頁的前程式碼,讓“連線使用說明”指到這個 http://jumpserver.venic.com/doc/ 修改處在 /opt/jumpserver-master/templates/nav.html
測試跳轉後的顯示介面樣式如下:
問題記錄三:
修改sshd配置,禁止密碼登入# [root@test-vm001 ~]# vim /etc/sshd/sshd_config ...... PasswordAuthentication no [root@test-vm001 ~]# service sshd restart
問題記錄四:
非admin的普通使用者登入jumpserver介面,通過webshell登入伺服器的時候,連線報錯!報錯資訊為: Connection Reset By Peer 通過jumpserver的log日誌,可以看出Websocket連線失效了 [root@test-vm001 install]# tail -f /data/jumpserver/logs/jumpserver.log 2018-01-18 09:18:40,660 - views.py - DEBUG - 獲取授權系統使用者: ops,app,dev 2018-01-18 09:18:46,429 - run_websocket.py - DEBUG - Websocket: session_key: 2018-01-18 09:18:46,430 - run_websocket.py - WARNING - Websocket: Request auth failed. 2018-01-18 09:18:46,486 - run_websocket.py - DEBUG - Websocket: Close request 2018-01-18 09:18:48,589 - run_websocket.py - DEBUG - Websocket: session_key: 2018-01-18 09:18:48,589 - run_websocket.py - WARNING - Websocket: Request auth failed. 2018-01-18 09:18:48,645 - run_websocket.py - DEBUG - Websocket: Close request 通過重啟jumpserver服務重新建立Websocket連結即可此問題,但是過了一段時間後,Websocket連結會再次失效。 所以可以結合crontab定時重啟jumpserver。 [root@test-vm001 install]# crontab -e */2 * * * * /data/jumpserver/service.sh restart > /dev/null 2>&1
問題記錄五:
jumpserver執行一段時間後,突然發現伺服器的CPU負載很高,zabbix報警jumpserver伺服器利用率已高達85%! [root@jumpserver01 ~]# uptime 14:03:49 up 52 days, 22:36, 4 users, load average: 33, 35, 38 [root@jumpserver01 ~]# top top - 14:04:12 up 52 days, 22:37, 4 users, load average: 1.02, 1.05, 0.80 Tasks: 902 total, 3 running, 899 sleeping, 0 stopped, 0 zombie Cpu(s): 2.6%us, 0.1%sy, 0.0%ni, 97.3%id, 0.0%wa, 0.0%hi, 0.0%si, 0.0%st Mem: 65724264k total, 4008704k used, 61715560k free, 257600k buffers Swap: 32767996k total, 0k used, 32767996k free, 230724k cached PID USER PR NI VIRT RES SHR S %CPU %MEM TIME+ COMMAND 20299 chengjun 20 0 360m 35m 4768 R 100.0 0.1 20:49.54 python 32661 502 20 0 303m 25m 3720 S 100.0 0.1 0:00.22 python 20299 chengjun 20 0 360m 35m 4768 R 100.0 0.1 20:49.54 python 32661 502 20 0 303m 25m 3720 S 100.0 0.1 0:00.22 python 25149 chengjun 20 0 360m 35m 4768 R 100.0 0.1 20:49.54 python 38315 502 20 0 303m 25m 3720 S 100.0 0.1 0:00.22 python 42299 chengjun 20 0 360m 35m 4768 R 100.0 0.1 20:49.54 python 23161 502 20 0 303m 25m 3720 S 100.0 0.1 0:00.22 python ...... jumpserver伺服器的配置是128G記憶體、40核CPU,按照這個配置,伺服器硬體配置方面是絕對不會出現瓶頸的! 經排查是由於之前有些使用者登入jumpserver後沒有退出程式,從而導致一直佔用cpu資源。 [root@jumpserver01 ~]# ps -ef|grep python root 20299 20284 98 13:42? 00:30:02 python /data/jumpserver/connect.py root 37155 37153 0 14:12? 00:00:00 python /data/jumpserver/manage.py runserver 0.0.0.0:80 502 37156 37154 0 2017 ? 00:00:00 python /data/jumpserver/run_websocket.py 502 37171 37155 0 2017 ? 00:00:00 /usr/bin/python /data/jumpserver/manage.py runserver 0.0.0.0:80 root 37228 37156 0 14:12? 00:00:00 python /data/jumpserver/run_websocket.py root 37229 37156 0 14:12? 00:00:00 python /data/jumpserver/run_websocket.py 502 37230 37156 0 2017 ? 00:00:00 python /data/jumpserver/run_websocket.py zhenyj 37231 37156 0 2017 ? 00:00:00 python /data/jumpserver/run_websocket.py 502 37232 37156 0 2017 ? 00:00:00 python /data/jumpserver/run_websocket.py 502 37228 37156 0 2017 ? 00:00:00 python /data/jumpserver/run_websocket.py zhenyj 37229 37156 0 2017 ? 00:00:00 python /data/jumpserver/run_websocket.py zhenyj 37230 37156 0 2017 ? 00:00:00 python /data/jumpserver/run_websocket.py 502 37231 37156 0 2017 ? 00:00:00 python /data/jumpserver/run_websocket.py root 37232 37156 0 14:12? 00:00:00 python /data/jumpserver/run_websocket.py 502 37228 37156 0 2017 ? 00:00:00 python /data/jumpserver/run_websocket.py 502 37229 37156 0 2017 ? 00:00:00 python /data/jumpserver/run_websocket.py wangbin 37230 37156 0 2017 ? 00:00:00 python /data/jumpserver/run_websocket.py root 37231 37156 0 14:12? 00:00:00 python /data/jumpserver/run_websocket.py root 37232 37156 0 14:12? 00:00:00 python /data/jumpserver/run_websocket.py 502 37228 37156 0 2017 ? 00:00:00 python /data/jumpserver/run_websocket.py 502 37229 37156 0 2017 ? 00:00:00 python /data/jumpserver/run_websocket.py xiaof 37230 37156 0 2017 ? 00:00:00 python /data/jumpserver/run_websocket.py 525 37228 37156 0 2017 ? 00:00:00 python /data/jumpserver/run_websocket.py 525 37229 37156 0 2017 ? 00:00:00 python /data/jumpserver/run_websocket.py wangbin 37230 37156 0 2017 ? 00:00:00 python /data/jumpserver/run_websocket.py chengwq 47230 37156 0 2017 ? 00:00:00 python /data/jumpserver/run_websocket.py chengwq 43230 37156 0 2017 ? 00:00:00 python /data/jumpserver/run_websocket.py 如上資訊,那些第五列顯示"2017 ?"資訊的,即是之前登陸jumpserver後沒有完全退出以至於系統資源一直被佔用。 批量kill掉這些程式的pid即可降低jumpserver伺服器的CPU利用率。 [root@jumpserver01 ~]# ps -ef|grep python |awk '$5=2017 {print $2}'|xargs kill -9