中間人攻擊(爬蟲工具) mitmproxy 使用指南

劉志軍發表於2019-03-04

mitmproxy 是 man-in-the-middle proxy 的簡稱,譯為中間人代理工具,可以用來攔截、修改、儲存 HTTP/HTTPS 請求。以命令列終端形式呈現,操作上類似於Vim,同時提供了 mitmweb 外掛,是類似於 Chrome 瀏覽器開發者模式的視覺化工具。

它是基於Python開發的開源工具,最重要的是它提供了Python API,你完全可以通過Python程式碼來控制請求和響應,這是其它工具所不能做到的,這點也是我喜歡這個工具的原因之一。

安裝

sudo pip3 install mitmproxy
複製程式碼

啟動

mitmproxy
#或者指定埠
mitmproxy -p 8888
複製程式碼

啟動 mitmproxy 之後,預設開啟8080埠, mitmproxy 命令不支援Windows平臺,需要使用 mitmdump 或者 mitmweb 命令代替。Windows系統也可以在官網下載它的EXE檔案進行安裝。

手機或者瀏覽器設定好代理之後,就可以進行抓包分析了,開啟瀏覽器訪問某個網址,mitmproxy 看到的效果是:

中間人攻擊(爬蟲工具) mitmproxy 使用指南

當前一共有136個請求,當前選擇的是第16個請求,請求方法是 GET, 返回的狀態碼是200,代理的埠是8080,通過 J、K 鍵可上下切換到不同的請求,回車可以看到當前選中的請求詳情,包括三部分,Request和Response還有 Detail

中間人攻擊(爬蟲工具) mitmproxy 使用指南

mitmproxy 快捷鍵

? 幫助文件  
q 返回/退出程式 
b 儲存response body 
f 輸入過濾條件
k 上
j 下
h 左
l 右
space 翻頁
enter 進入介面詳情
z 清屏
e 編輯
r 重新請求
複製程式碼

HTTPS 抓包配置

對於HTTPS請求,為了能正常抓到請求,需要先安裝證照。沒安裝證照的請求看到的效果是這樣的。

中間人攻擊(爬蟲工具) mitmproxy 使用指南

開啟網址 mitm.it , 選擇匹配的平臺,下載 HTTPS 證照。並按照對應的步驟進行安裝

中間人攻擊(爬蟲工具) mitmproxy 使用指南

mitmweb

$ mitmweb
複製程式碼

啟動 mitmweb 命令後,會有一個類似Chrome開發者工具的Web頁面,功能上類似mitmroxy,一樣可以檢視每個請求的詳情,包括請求、響應,還可以對請求和響應內容進行修改,包括過濾、重新傳送請求等常用功能。

中間人攻擊(爬蟲工具) mitmproxy 使用指南

mitmdump

$ mitmdump -s script.py
複製程式碼

mitmdump 命令最大的特點就是可以自定義指令碼,你可以在指令碼中對請求或者響應內容通過程式設計的方式來控制,實現資料的解析、修改、儲存等工作

# script.py
from mitmproxy import http

def request(flow: http.HTTPFlow) -> None:
	# 將請求新增了一個查詢引數
    flow.request.query["mitmproxy"] = "rocks"

def response(flow: http.HTTPFlow) -> None:
	# 將響應頭中新增了一個自定義頭欄位
    flow.response.headers["newheader"] = "foo"
    print(flow.response.text)
複製程式碼

當你在瀏覽器請求 httpbin.org/get ,看到的效果:

中間人攻擊(爬蟲工具) mitmproxy 使用指南

你還可以參考這些連結:

同步發表部落格:foofish.net

https://user-gold-cdn.xitu.io/2017/7/16/4a84df1d3a79ea6aa60d4068ea549f6d?imageView2/0/w/1280/h/960/format/webp/ignore-error/1

相關文章