Python常用的標準庫以及第三方庫有哪些?
20個必不可少的Python庫也是基本的第三方庫
讀者您好。今天我將介紹20個屬於我常用工具的Python庫,我相信你看完之後也會覺得離不開它們。他們是:
- Requests.Kenneth Reitz寫的最富盛名的http庫。每個Python程式設計師都應該有它。
- Scrapy.如果你從事爬蟲相關的工作,那麼這個庫也是必不可少的。用過它之後你就不會再想用別的同類庫了。
- wxPython.Python的一個GUI(圖形使用者介面)工具。我主要用它替代tkinter。你一定會愛上它的。
- Pillow.它是PIL(Python圖形庫)的一個友好分支。對於使用者比PIL更加友好,對於任何在圖形領域工作的人是必備的庫。
- SQLAlchemy.一個資料庫的庫。對它的評價褒貶參半。是否使用的決定權在你手裡。
- BeautifulSoup.我知道它很慢,但這個xml和html的解析庫對於新手非常有用。
- Twisted.對於網路應用開發者最重要的工具。它有非常優美的api,被很多Python開發大牛使用。
- NumPy.我們怎麼能缺少這麼重要的庫?它為Python提供了很多高階的數學方法。
- SciPy.既然我們提了NumPy,那就不得不提一下SciPy。這是一個Python的演算法和數學工具庫,它的功能把很多科學家從Ruby吸引到了Python。
- matplotlib.一個繪製資料圖的庫。對於資料科學家或分析師非常有用。
- Pygame.哪個程式設計師不喜歡玩遊戲和寫遊戲?這個庫會讓你在開發2D遊戲的時候如虎添翼。
- Pyglet.3D動畫和遊戲開發引擎。非常有名的Python版本Minecraft就是用這個引擎做的。
- pyQT.Python的GUI工具。這是我在給Python指令碼開發使用者介面時次於wxPython的選擇。
- pyGtk.也是Python GUI庫。很有名的Bittorrent客戶端就是用它做的。
- Scapy.用Python寫的資料包探測和分析庫。
- pywin32.一個提供和windows互動的方法和類的Python庫。
- nltk.自然語言工具包。我知道大多數人不會用它,但它通用性非常高。如果你需要處理字串的話,它是非常好的庫。但它的功能遠遠不止如此,自己摸索一下吧。
- nose.Python的測試框架。被成千上萬的Python程式設計師使用。如果你做測試導向的開發,那麼它是必不可少的。
- SymPy.SymPy可以做代數評測、差異化、擴充套件、複數等等。它封裝在一個純Python發行版本里。
- IPython.怎麼稱讚這個工具的功能都不為過。它把Python的提示資訊做到了極致。包括完成資訊、歷史資訊、shell功能,以及其他很多很多方面。一定要研究一下它。
1、psutil是一個跨平臺庫(http://code.google.com/p/psutil/)
能夠實現獲取系統執行的程式和系統利用率(記憶體,CPU,磁碟,網路等),主要用於系統監控,分析和系統資源及程式的管理。
2、IPy(http://github.com/haypo/python-ipy),輔助IP規劃。
3、dnspython(http://dnspython.org)Python實現的一個DNS工具包。
4、difflib:difflib作為Python的標準模組,無需安裝,作用是對比文字之間的差異。
5、filecmp:系統自帶,可以實現檔案,目錄,遍歷子目錄的差異,對比功能。
6、smtplib:傳送電子郵件模組
7、pycurl(http://pycurl.sourceforge.net)是一個用C語言寫的libcurl Python實現,功能強大,支援的協議有:FTP,HTTP,HTTPS,TELNET等,可以理解為Linux下curl命令功能的Python封裝。
8、XlsxWriter:操作Excel工作表的文字,數字,公式,圖表等。
9、rrdtool:用於跟蹤物件的變化,生成這些變化的走走勢圖
10、scapy(http://www.wecdev.org/projects/scapy/)是一個強大的互動式資料包處理程式,它能夠對資料包進行偽造或解包,包括髮送資料包,包嗅探,應答和反饋等功能。
11、Clam Antivirus免費開放原始碼防毒軟體,pyClamad,可以讓Python模組直接使用ClamAV病毒掃描守護程式calmd。
12、pexpect:可以理解成Linux下expect的Python封裝,通過pexpect我們可以實現對ssh,ftp,passwd,telnet等命令列進行自動互動,而無需人工干涉來達到自動化的目的。
13、paramiko是基於Python實現的SSH2遠端安裝連線,支援認證及金鑰方式。可以實現遠端命令執行,檔案傳輸,中間SSH代理等功能。相對於Pexpect,封裝的層次更高,更貼近SSH協議的功能,官網地址:http://paramiko.org(依賴:Crypto,Ecdsa,Python開發包python-devel)
14、fabric是基於Python實現的SSH命令列工具,簡化了SSH的應用程式部署及系統管理任務,它提供了系統基礎的操作元件,可以實現本地或遠端shell命令,包括命令執行,檔案上傳,下載及完整執行日誌輸出等功能。Fabric在paramiko的基礎上做了更高一層的封裝,操作起來更加簡單。官網地址:http://www.fabfile.org(依賴setuptools,Crypto,paramiko包支援)
15、CGIHTTPRequestHandler實現對CGI的支援。
16、ansible(http://www.ansibleworks.com/)一種整合IT系統的配置管理,應用部署,執行特定任務的開源平臺。基於Python實現,由Paramiko和PyYAML兩個關鍵模組構建。Ansibl與Saltstack最大的區別是Ansible無需在被控主機上部署任何客戶端,預設直接通過SSH通道進行遠端命令執行或下發功能。
17、YAML:是一種用來表達資料序列的程式語言。
18、playbook:一個非常簡單的配置管理和多主機部署系統。
19、saltstack(http://saltstack.com)是一個伺服器基礎架構集中化管理平臺,一般可以理解為簡化版的puppet和加強版的func。Saltstack基於Python語言實現,結合輕量級訊息佇列ZeroMQ,與Python每三方模組(Pyzmq,PyCrypto,Pyjinja2,python-msgpack和PyYAML等)構建。
20、func,為解決叢集管理,監控問題需設計開發的系統管理基礎框架。
- itertools http://docs.python.org/2/library/itertools.html
- functools http://docs.python.org/2/library/functools.html 學好python有必要掌握上面這兩個庫吧,
- re 正則
- subprocess http://docs.python.org/2/library/subprocess.html 呼叫shell命令的神器
- pdb 除錯
- traceback 除錯
- pprint 漂亮的輸出
- logging 日誌
- threading和multiprocessing 多執行緒
- urllib/urllib2/httplib http庫,httplib底層一點,推薦第三方的庫requests
- os/sys 系統,環境相關
- Queue 佇列
- pickle/cPickle 序列化工具
- hashlib md5, sha等hash演算法
- cvs
- json/simplejson python的json庫,據so上的討論和benchmark,simplejson的效能要高於json
- timeit 計算程式碼執行的時間等等
- cProfile python效能測量模組
- glob 類似與listfile,可以用來查詢檔案
- atexit 有一個註冊函式,可用於正好在指令碼退出執行前執行一些程式碼
- dis python 反彙編,當對某條語句不理解原理時,可以用dis.dis 函式來檢視程式碼對應的python 直譯器指令等等。
3th libs:
- paramiko https://github.com/paramiko/paramiko ssh python 庫
- selenium https://pypi.python.org/pypi/selenium 瀏覽器自動化測試工具selenium的python 介面
- lxml http://lxml.de/ python 解析html,xml 的神器
- mechanize https://pypi.python.org/pypi/mechanize/ Stateful programmatic web browsing
- pycurl https://pypi.python.org/pypi/pycurl cURL library module for Python
- Fabric http://docs.fabfile.org/en/1.8/ Fabric is a Python (2.5 or higher) library and command-line tool for streamlining the use of SSH for application deployment or systems administration tasks.
- xmltodict https://github.com/martinblech/xmltodict xml 轉 dict,真心好用
- urllib3 和 requests: 當然其實requests就夠了 Requests: HTTP for Humans
- flask http://flask.pocoo.org/python web 微框架
- ipdb 除錯神器,同時推薦ipython!結合ipython使用
- redis redis python介面
- pymongo mongodbpython介面
- PIL http://www.pythonware.com/products/pil/ python影象處理
- mako http://www.makotemplates.org/ python模版引擎
- numpy , scipy 科學計算
- matplotlib 畫圖
- scrapy 爬蟲
- django/tornado/web.py/web2py/uliweb/flask/twisted/bottle/cherrypy.等等 python web框架/伺服器
- sh 1.08 — sh v1.08 documentation 用來執行shell 模組的 極佳選擇
環境管理
管理 Python 版本和環境的工具
p – 非常簡單的互動式 python 版本管理工具。
pyenv – 簡單的 Python 版本管理工具。
Vex – 可以在虛擬環境中執行命令。
virtualenv – 建立獨立 Python 環境的工具。
virtualenvwrapper- virtualenv 的一組擴充套件。
包管理
管理包和依賴的工具。
pip – Python 包和依賴關係管理工具。
pip-tools – 保證 Python 包依賴關係更新的一組工具。
conda – 跨平臺,Python 二進位制包管理工具。
Curdling – 管理 Python 包的命令列工具。
wheel – Python 分發的新標準,意在取代 eggs。
包倉庫
本地 PyPI 倉庫服務和代理。
warehouse – 下一代 PyPI。
Warehousebandersnatch – PyPA 提供的 PyPI 映象工具。
devpi – PyPI 服務和打包/測試/分發工具。
localshop – 本地 PyPI 服務(自定義包並且自動對 PyPI 映象)。
分發
打包為可執行檔案以便分發。
PyInstaller – 將 Python 程式轉換成獨立的執行檔案(跨平臺)。
dh-virtualenv – 構建並將 virtualenv 虛擬環境作為一個 Debian 包來發布。
Nuitka – 將指令碼、模組、包編譯成可執行檔案或擴充套件模組。
py2app – 將 Python 指令碼變為獨立軟體包(Mac OS X)。
py2exe – 將 Python 指令碼變為獨立軟體包(Windows)。
pynsist – 一個用來建立 Windows 安裝程式的工具,可以在安裝程式中打包 Python本身。
構建工具
將原始碼編譯成軟體。
buildout – 一個構建系統,從多個元件來建立,組裝和部署應用。
BitBake – 針對嵌入式 Linux 的類似 make 的構建工具。
fabricate – 對任何語言自動找到依賴關係的構建工具。
PlatformIO – 多平臺命令列構建工具。
PyBuilder – 純 Python 實現的持續化構建工具。
SCons – 軟體構建工具。
互動式解析器
互動式 Python 解析器。
IPython – 功能豐富的工具,非常有效的使用互動式 Python。
bpython- 介面豐富的 Python 解析器。
ptpython – 高階互動式Python解析器, 構建於python-prompt-toolkit 之上。
檔案
檔案管理和 MIME(多用途的網際郵件擴充協議)型別檢測。
imghdr – (Python 標準庫)檢測圖片型別。
mimetypes – (Python 標準庫)將檔名對映為 MIME 型別。
path.py – 對 os.path 進行封裝的模組。
pathlib – (Python3.4+ 標準庫)跨平臺的、物件導向的路徑操作庫。
python-magic- 檔案型別檢測的第三方庫 libmagic 的 Python 介面。
Unipath- 用物件導向的方式操作檔案和目錄
watchdog – 管理檔案系統事件的 API 和 shell 工具
日期和時間
操作日期和時間的類庫。
arrow- 更好的 Python 日期時間操作類庫。
Chronyk – Python 3 的類庫,用於解析手寫格式的時間和日期。
dateutil – Python datetime 模組的擴充套件。
delorean- 解決 Python 中有關日期處理的棘手問題的庫。
moment – 一個用來處理時間和日期的Python庫。靈感來自於Moment.js。
PyTime – 一個簡單易用的Python模組,用於通過字串來操作日期/時間。
pytz – 現代以及歷史版本的世界時區定義。將時區資料庫引入Python。
when.py – 提供使用者友好的函式來幫助使用者進行常用的日期和時間操作。
文字處理
用於解析和操作文字的庫。
通用
chardet – 字元編碼檢測器,相容 Python2 和 Python3。
difflib – (Python 標準庫)幫助我們進行差異化比較。
ftfy – 讓Unicode文字更完整更連貫。
fuzzywuzzy – 模糊字串匹配。
Levenshtein – 快速計算編輯距離以及字串的相似度。
pangu.py – 在中日韓語字元和數字字母之間新增空格。
pyfiglet -figlet 的 Python實現。
shortuuid – 一個生成器庫,用以生成簡潔的,明白的,URL 安全的 UUID。
unidecode – Unicode 文字的 ASCII 轉換形式 。
uniout – 列印可讀的字元,而不是轉義的字串。
xpinyin – 一個用於把漢字轉換為拼音的庫。
Slug化
awesome-slugify – 一個 Python slug 化庫,可以保持 Unicode。
python-slugify – Python slug 化庫,可以把 unicode 轉化為 ASCII。
unicode-slugify – 一個 slug 工具,可以生成 unicode slugs ,需要依賴 Django 。
解析器
phonenumbers – 解析,格式化,儲存,驗證電話號碼。
PLY – lex 和 yacc 解析工具的 Python 實現。
Pygments – 通用語法高亮工具。
pyparsing – 生成通用解析器的框架。
python-nameparser – 把一個人名分解為幾個獨立的部分。
python-user-agents – 瀏覽器 user agent 解析器。
sqlparse – 一個無驗證的 SQL 解析器。
特殊文字格式處理
一些用來解析和操作特殊文字格式的庫。
通用
tablib – 一個用來處理中表格資料的模組。
Office
Marmir – 把輸入的Python 資料結構轉換為電子表單。
openpyxl – 一個用來讀寫 Excel 2010 xlsx/xlsm/xltx/xltm 檔案的庫。
python-docx – 讀取,查詢以及修改 Microsoft Word 2007/2008 docx 檔案。
unoconv – 在 LibreOffice/OpenOffice 支援的任意檔案格式之間進行轉換。
XlsxWriter – 一個用於建立 Excel .xlsx 檔案的 Python 模組。
xlwings – 一個使得在 Excel 中方便呼叫 Python 的庫(反之亦然),基於 BSD 協議。
xlwt / xlrd – 讀寫 Excel 檔案的資料和格式資訊。
relatorio – 模板化OpenDocument 檔案。
PDF
PDFMiner – 一個用於從PDF文件中抽取資訊的工具。
PyPDF2 – 一個可以分割,合併和轉換 PDF 頁面的庫。
ReportLab – 快速建立富文字 PDF 文件。
Markdown
Mistune – 快速並且功能齊全的純 Python 實現的 Markdown 解析器。
Python-Markdown – John Gruber’s Markdown 的 Python 版實現。
YAML
PyYAML – Python 版本的 YAML 解析器。
CSV
csvkit – 用於轉換和操作 CSV 的工具。
Archive
unp – 一個用來方便解包歸檔檔案的命令列工具。
自然語言處理
用來處理人類語言的庫。
NLTK – 一個先進的平臺,用以構建處理人類語言資料的 Python 程式。
jieba – 中文分詞工具。
langid.py – 獨立的語言識別系統。
Pattern – Python 網路資訊挖掘模組。
SnowNLP – 一個用來處理中文文字的庫。
TextBlob – 為進行普通自然語言處理任務提供一致的 API。
TextGrocery – 一簡單高效的短文字分類工具,基於 LibLinear 和 Jieba。
文件
用以生成專案文件的庫。
Sphinx – Python 文件生成器。
awesome-sphinxdoc
MkDocs – 對 Markdown 友好的文件生成器。
pdoc – 一個可以替換Epydoc 的庫,可以自動生成 Python 庫的 API 文件。
Pycco – 文學程式設計(literate-programming)風格的文件生成器。
配置
用來儲存和解析配置的庫。
config – logging 模組作者寫的分級配置模組。
ConfigObj – INI 檔案解析器,帶驗證功能。
ConfigParser – (Python 標準庫) INI 檔案解析器。
profig – 通過多種格式進行配置,具有數值轉換功能。
python-decouple – 將設定和程式碼完全隔離。
命令列工具
用於建立命令列程式的庫。
命令列程式開發
cement – Python 的命令列程式框架。
click – 一個通過組合的方式來建立精美命令列介面的包。
cliff – 一個用於建立命令列程式的框架,可以建立具有多層命令的命令列程式。
clint – Python 命令列程式工具。
colorama – 跨平臺彩色終端文字。
docopt – Python 風格的命令列引數解析器。
Gooey – 一條命令,將命令列程式變成一個 GUI 程式。
python-prompt-toolkit – 一個用於構建強大的互動式命令列程式的庫。
生產力工具
aws-cli – Amazon Web Services 的通用命令列介面。
bashplotlib – 在終端中進行基本繪圖。
caniusepython3 – 判斷是哪個專案妨礙你你移植到 Python 3。
cookiecutter – 從 cookiecutters(專案模板)建立專案的一個命令列工具。
doitlive – 一個用來在終端中進行現場演示的工具。
howdoi – 通過命令列獲取即時的程式設計問題解答。
httpie – 一個命令列HTTP 客戶端,cURL 的替代品,易用性更好。
PathPicker – 從bash輸出中選出檔案。
percol – 向UNIX shell 傳統管道概念中加入互動式選擇功能。
SAWS – 一個加強版的 AWS 命令列。
thefuck – 修正你之前的命令列指令。
mycli – 一個 MySQL 命令列客戶端,具有自動補全和語法高亮功能。
pgcli – Postgres 命令列工具,具有自動補全和語法高亮功能。
下載器
用來進行下載的庫.
s3cmd – 一個用來管理Amazon S3 和 CloudFront 的命令列工具。
s4cmd – 超級 S3 命令列工具,效能更加強勁。
you-get – 一個 YouTube/Youku/Niconico 視訊下載器,使用 Python3 編寫。
youtube-dl – 一個小巧的命令列程式,用來下載 YouTube 視訊。
影象處理
用來操作影象的庫.
pillow – Pillow 是一個更加易用版的 PIL。
hmap – 影象直方圖對映。
imgSeek – 一個使用視覺相似性搜尋一組圖片集合的專案。
nude.py – 裸體檢測。
pyBarcode – 不借助 PIL 庫在 Python 程式中生成條形碼。
pygram – 類似 Instagram 的影象濾鏡。
python-qrcode – 一個純 Python 實現的二維碼生成器。
Quads – 基於四叉樹的計算機藝術。
scikit-image – 一個用於(科學)影象處理的 Python 庫。
thumbor – 一個小型影象服務,具有剪裁,尺寸重設和翻轉功能。
wand – MagickWand的Python 繫結。MagickWand 是 ImageMagick的 C API 。
OCR
光學字元識別庫。
pyocr – Tesseract 和 Cuneiform 的一個封裝(wrapper)。
pytesseract – Google Tesseract OCR 的另一個封裝(wrapper)。
python-tesseract – Google Tesseract OCR 的一個包裝類。
音訊
用來操作音訊的庫
audiolazy -Python 的數字訊號處理包。
audioread – 交叉庫 (GStreamer + Core Audio + MAD + FFmpeg) 音訊解碼。
beets – 一個音樂庫管理工具及 MusicBrainz 標籤新增工具
dejavu – 音訊指紋提取和識別
django-elastic-transcoder – Django + Amazon Elastic Transcoder。
eyeD3 – 一個用來操作音訊檔案的工具,具體來講就是包含 ID3 元資訊的 MP3 檔案。
id3reader – 一個用來讀取 MP3 後設資料的 Python 模組。
m3u8 – 一個用來解析 m3u8 檔案的模組。
mutagen – 一個用來處理音訊後設資料的 Python 模組。
pydub – 通過簡單、簡潔的高層介面來操作音訊檔案。
pyechonest – Echo Nest API 的 Python 客戶端
talkbox – 一個用來處理演講/訊號的 Python 庫
TimeSide – 開源 web 音訊處理框架。
tinytag – 一個用來讀取MP3, OGG, FLAC 以及 Wave 檔案音樂後設資料的庫。
mingus – 一個高階音樂理論和曲譜包,支援 MIDI 檔案和回放功能。
視訊
用來操作視訊和GIF的庫。
moviepy – 一個用來進行基於指令碼的視訊編輯模組,適用於多種格式,包括動圖 GIFs。
scikit-video – SciPy 視訊處理常用程式。
地理位置
地理編碼地址以及用來處理經緯度的庫。
GeoDjango – 世界級地理圖形 web 框架。
GeoIP – MaxMind GeoIP Legacy 資料庫的 Python API。
geojson – GeoJSON 的 Python 繫結及工具。
geopy – Python 地址編碼工具箱。
pygeoip – 純 Python GeoIP API。
django-countries – 一個 Django 應用程式,提供用於表格的國家選擇功能,國旗圖示靜態檔案以及模型中的國家欄位。
HTTP
使用HTTP的庫。
requests – 人性化的HTTP請求庫。
grequests – requests 庫 + gevent ,用於非同步 HTTP 請求.
httplib2 – 全面的 HTTP 客戶端庫。
treq – 類似 requests 的Python API 構建於 Twisted HTTP 客戶端之上。
urllib3 – 一個具有執行緒安全連線池,支援檔案 post,清晰友好的 HTTP 庫。
資料庫
Python實現的資料庫。
pickleDB – 一個簡單,輕量級鍵值儲存資料庫。
PipelineDB – 流式 SQL 資料庫。
TinyDB – 一個微型的,面向文件型資料庫。
ZODB – 一個 Python 原生物件資料庫。一個鍵值和物件圖資料庫。
資料庫驅動
用來連線和運算元據庫的庫。
MySQL – awesome-mysql系列
mysql-python – Python 的 MySQL 資料庫聯結器。
mysqlclient – mysql-python 分支,支援 Python 3。
oursql – 一個更好的 MySQL 聯結器,支援原生預編譯指令和 BLOBs.
PyMySQL – 純 Python MySQL 驅動,相容 mysql-python。
PostgreSQL
psycopg2 – Python 中最流行的 PostgreSQL 介面卡。
queries – psycopg2 庫的封裝,用來和 PostgreSQL 進行互動。
txpostgres – 基於 Twisted 的非同步 PostgreSQL 驅動。
其他關係型資料庫
apsw – 另一個 Python SQLite封裝。
dataset – 在資料庫中儲存Python字典 – 可以協同SQLite,MySQL,和 PostgreSQL工作。
pymssql- 一個簡單的Microsoft SQL Server資料庫介面。
NoSQL 資料庫
cassandra-python-driver – Cassandra 的 Python 驅動。
HappyBase – 一個為 Apache HBase 設計的,對開發者友好的庫。
Plyvel – 一個快速且功能豐富的 LevelDB 的 Python 介面。
py2neo – Neo4j restful 介面的Python 封裝客戶端。
pycassa – Cassandra 的 Python Thrift 驅動。
PyMongo – MongoDB 的官方 Python 客戶端。
redis-py – Redis 的 Python 客戶端。
telephus – 基於 Twisted 的 Cassandra 客戶端。
txRedis – 基於 Twisted 的 Redis 客戶端。
ORM
實現物件關係對映或資料對映技術的庫。
關係型資料庫
Django Models – Django 的一部分。
SQLAlchemy – Python SQL 工具以及物件關係對映工具。
awesome-sqlalchemy系列
Peewee – 一個小巧,富有表達力的 ORM。
PonyORM – 提供面向生成器的 SQL 介面的 ORM。
python-sql – 編寫 Python 風格的 SQL 查詢。
NoSQL 資料庫
django-mongodb-engine – Django MongoDB 後端。
PynamoDB – Amazon DynamoDB 的一個 Python 風格介面。
flywheel – Amazon DynamoDB 的物件對映工具。
MongoEngine – 一個Python 物件文件對映工具,用於 MongoDB。
hot-redis – 為 Redis 提供 Python 豐富的資料型別。
redisco – 一個 Python 庫,提供可以持續存在在 Redis 中的簡單模型和容器。
其他
butterdb – Google Drive 電子表格的 Python ORM。
Web 框架
全棧 web 框架。
Django – Python 界最流行的 web 框架。
awesome-django系列
Flask – 一個 Python 微型框架。 https://github.com/humiaozuzu/awesome-flask系列
Pyramid – 一個小巧,快速,接地氣的開源Python web 框架。
awesome-pyramid系列
Bottle – 一個快速小巧,輕量級的 WSGI 微型 web 框架。
CherryPy – 一個極簡的 Python web 框架,服從 HTTP/1.1 協議且具有WSGI 執行緒池。
TurboGears – 一個可以擴充套件為全棧解決方案的微型框架。
web.py – 一個 Python 的 web 框架,既簡單,又強大。
web2py – 一個全棧 web 框架和平臺,專注於簡單易用。
Tornado – 一個web 框架和非同步網路庫。
許可權
允許或拒絕使用者訪問資料或功能的庫。
Carteblanche – Module to align code with thoughts of users and designers. Also magically handles navigation and permissions.
django-guardian – Django 1.2+ 實現了單個物件許可權。
django-rules – 一個小巧但是強大的應用,提供物件級別的許可權管理,且不需要使用資料庫。
CMS
內容管理系統
django-cms – 一個開源的,企業級 CMS,基於 Django。
djedi-cms – 一個輕量級但卻非常強大的 Django CMS ,考慮到了外掛,內聯編輯以及效能。
FeinCMS – 基於 Django 構建的最先進的內容管理系統之一。
Kotti – 一個高階的,Python 範的 web 應用框架,基於 Pyramid 構建。
Mezzanine – 一個強大的,持續的,靈活的內容管理平臺。
Opps – 一個為雜誌,報紙網站以及大流量入口網站設計的 CMS 平臺,基於 Django。
Plone – 一個構建於開源應用伺服器 Zope 之上的 CMS。
Quokka – 靈活,可擴充套件的小型 CMS,基於 Flask 和 MongoDB。
Wagtail – 一個 Django 內容管理系統。
Widgy – 最新的 CMS 框架,基於 Django。
電子商務
用於電子商務以及支付的框架和庫。
django-oscar – 一個用於 Django 的開源的電子商務框架。
django-shop – 一個基於 Django 的店鋪系統。
Cartridge – 一個基於 Mezzanine 構建的購物車應用。
shoop – 一個基於 Django 的開源電子商務平臺。
alipay – 非官方的 Python 支付寶 API。
merchant – 一個可以接收來自多種支付平臺支付的 Django 應用。
money – 貨幣類庫with optional CLDR-backed locale-aware formatting and an extensible currency exchange solution.
python-currencies – 顯示貨幣格式以及它的數值。
RESTful API
用來開發RESTful APIs的庫
Django
django-rest-framework – 一個強大靈活的工具,用來構建 web API。
django-tastypie – 為Django 應用開發API。
django-formapi – 為 Django 的表單驗證,建立 JSON APIs 。
Flask
flask-api – 為 flask 開發的,可瀏覽 Web APIs 。
flask-restful – 為 flask 快速建立REST APIs 。
flask-restless – 為 SQLAlchemy 定義的資料庫模型建立 RESTful APIs 。
flask-api-utils – 為 Flask 處理 API 表示和驗證。
eve – REST API 框架,由 Flask, MongoDB 等驅動。
Pyramid
cornice – 一個Pyramid 的 REST 框架 。
與框架無關的
falcon – 一個用來建立雲 API 和 web app 後端的噶效能框架。
sandman – 為現存的資料庫驅動系統自動建立 REST APIs 。
restless – 框架無關的 REST 框架 ,基於從 Tastypie 學到的知識。
ripozo – 快速建立 REST/HATEOAS/Hypermedia APIs。
驗證
實現驗證方案的庫。
OAuth
Authomatic – 簡單但是強大的框架,身份驗證/授權客戶端。
django-allauth – Django 的驗證應用。
django-oauth-toolkit – 為 Django 使用者準備的 OAuth2。
django-oauth2-provider – 為 Django 應用提供 OAuth2 接入。
Flask-OAuthlib – OAuth 1.0/a, 2.0 客戶端實現,供 Flask 使用。
OAuthLib – 一個 OAuth 請求-簽名邏輯通用、 完整的實現。
python-oauth2 – 一個完全測試的抽象介面。用來建立 OAuth 客戶端和服務端。
python-social-auth – 一個設定簡單的社會化驗證方式。
rauth – OAuth 1.0/a, 2.0, 和 Ofly 的 Python 庫。
sanction – 一個超級簡單的OAuth2 客戶端實現。
其他
jose – JavaScript 物件簽名和加密草案的實現。
PyJWT – JSON Web 令牌草案 01。
python-jws – JSON Web 簽名草案 02 的實現。
python-jwt – 一個用來生成和驗證 JSON Web 令牌的模組。
模板引擎
模板生成和詞法解析的庫和工具。
Jinja2 – 一個現代的,對設計師友好的模板引擎。
Chameleon – 一個 HTML/XML 模板引擎。 模仿了 ZPT(Zope Page Templates), 進行了速度上的優化。
Genshi – Python 模板工具,用以生成 web 感知的結果。
Mako – Python 平臺的超高速輕量級模板。
Queue
處理事件以及任務佇列的庫。
celery – 一個非同步任務佇列/作業佇列,基於分散式訊息傳遞。
huey – 小型多執行緒任務佇列。
mrq – Mr. Queue -一個 Python 的分散式 worker 任務佇列, 使用 Redis 和 gevent。
rq – 簡單的 Python 作業佇列。
simpleq – 一個簡單的,可無限擴張的,基於亞馬遜 SQS 的佇列。
搜尋
對資料進行索引和執行搜尋查詢的庫和軟體。
django-haystack – Django 模組化搜尋。
elasticsearch-py – Elasticsearch 的官方底層 Python 客戶端。
elasticsearch-dsl-py -Elasticsearch 的官方高階 Python 客戶端。
solrpy – solr的 Python 客戶端。
Whoosh – 一個快速的純 Python 搜尋引擎庫。
動態訊息
用來建立使用者活動的庫。
django-activity-stream – 從你的站點行為中生成通用活動資訊流。
Stream-Framework – 使用 Cassandra 和 Redis 建立動態訊息和通知系統。
資源管理
管理、壓縮、縮小網站資源的工具。
django-compressor – 將連結和內聯的 JavaScript 或 CSS 壓縮到一個單獨的快取檔案中。
django-storages – 一個針對 Django 的自定義儲存後端的工具集合。
fanstatic – 打包、優化,並且把靜態檔案依賴作為 Python 的包來提供。
File Conveyor – 一個後臺駐留的程式,用來發現和同步檔案到 CDNs, S3 和 FTP。
Flask-Assets – 幫你將 web 資源整合到你的 Flask app 中。
jinja-assets-compressor – 一個 Jinja 擴充套件,用來編譯和壓縮你的資源。
webassets – 為你的靜態資源打包、優化和管理生成獨一無二的快取 URL。
快取
快取資料的庫。
Beaker – 一個快取和會話庫,可以用在 web 應用和獨立 Python指令碼和應用上。
django-cache-machine – Django 模型的自動快取和失效。
django-cacheops- 具有自動顆粒化事件驅動失效功能的 ORM。
django-viewlet – 渲染模板,同時具有額外的快取控制功能。
dogpile.cache – dogpile.cache 是 Beaker 的下一代替代品,由同一作者開發。
HermesCache – Python 快取庫,具有基於標籤的失效和 dogpile effect 保護功能。
johnny-cache – django應用快取框架。
pylibmc – libmemcached 介面的 Python 封裝。
電子郵件
用來傳送和解析電子郵件的庫。
django-celery-ses – 帶有 AWS SES 和 Celery 的 Django email 後端。
envelopes – 供人類使用的電子郵件庫。
flanker – 一個 email 地址和 Mime 解析庫。
imbox – Python IMAP 庫
inbox.py – Python SMTP 伺服器。
inbox – 一個開源電子郵件工具箱。
lamson – Python 風格的 SMTP 應用伺服器。
mailjet – Mailjet API 實現,用來提供批量傳送郵件,統計等功能。
marrow.mailer – 高效能可擴充套件郵件分發框架。
modoboa – 一個郵件託管和管理平臺,具有現代的、簡約的 Web UI。
pyzmail – 建立,傳送和解析電子郵件。
Talon – Mailgun 庫,用來抽取資訊和簽名。
國際化
用來進行國際化的庫。
Babel – 一個Python 的國際化庫。
Korean – 一個韓語詞態庫。
URL處理
解析URLs的庫
furl – 一個讓處理 URL 更簡單小型 Python 庫。
purl – 一個簡單的,不可變的URL類,具有簡潔的 API 來進行詢問和處理。
pyshorteners – 一個純 Python URL 縮短庫。
shorturl- 生成短小 URL 和類似 http://bit.ly 短鏈的Python 實現。
webargs – 一個解析 HTTP 請求引數的庫,內建對流行 web 框架的支援,包括 Flask, Django, Bottle, Tornado和 Pyramid。
HTML處理
處理 HTML和XML的庫。
BeautifulSoup – 以 Python 風格的方式來對 HTML 或 XML 進行迭代,搜尋和修改。
bleach – 一個基於白名單的 HTML 清理和文字連結庫。
cssutils – 一個 Python 的 CSS 庫。
html5lib – 一個相容標準的 HTML 文件和片段解析及序列化庫。
lxml – 一個非常快速,簡單易用,功能齊全的庫,用來處理 HTML 和 XML。
MarkupSafe – 為Python 實現 XML/HTML/XHTML 標記安全字串。
pyquery – 一個解析 HTML 的庫,類似 jQuery。
untangle – 將XML文件轉換為Python物件,使其可以方便的訪問。
xhtml2pdf – HTML/CSS 轉 PDF 工具。
xmltodict – 像處理 JSON 一樣處理 XML。
網路站點爬取
爬取網路站點的庫
Scrapy – 一個快速高階的螢幕爬取及網頁採集框架。
cola – 一個分散式爬蟲框架。
Demiurge – 基於PyQuery 的爬蟲微型框架。
feedparser – 通用 feed 解析器。
Grab – 站點爬取框架。
MechanicalSoup – 用於自動和網路站點互動的 Python 庫。
portia – Scrapy 視覺化爬取。
pyspider – 一個強大的爬蟲系統。
RoboBrowser – 一個簡單的,Python 風格的庫,用來瀏覽網站,而不需要一個獨立安裝的瀏覽器。
網頁內容提取
用於進行網頁內容提取的庫。
Haul – 一個可以擴充套件的影象爬取工具。
html2text – 將 HTML 轉換為 Markdown 格式文字
lassie – 人性化的網頁內容檢索庫。
micawber -一個小型網頁內容提取庫,用來從 URLs 提取富內容。
newspaper – 使用 Python 進行新聞提取,文章提取以及內容策展。
opengraph – 一個用來解析開放內容協議(Open Graph Protocol)的 Python模組。
python-goose – HTML內容/文章提取器。
python-readability- arc90 公司 readability 工具的 Python 高速埠
sanitize – 為雜亂的資料世界帶來調理性。
sumy – 一個為文字檔案和 HTML 頁面進行自動摘要的模組。
textract – 從任何格式的文件中提取文字,Word,PowerPoint,PDFs 等等。
表單
進行表單操作的庫。
Deform – Python HTML 表單生成庫,受到了 formish 表單生成庫的啟發。
django-bootstrap3- 整合了 Bootstrap 3 的 Django。
django-crispy-forms – 一個 Django 應用,他可以讓你以一種非常優雅且 DRY(Don’t repeat yourself) 的方式來建立美觀的表單。
django-remote-forms- 一個平臺獨立的 Django 表單序列化工具。
WTForms – 一個靈活的表單驗證和呈現庫。
WTForms-JSON- 一個 WTForms 擴充套件,用來處理 JSON 資料。
資料驗證
資料驗證庫。多用於表單驗證。
Cerberus – A mappings-validator with a variety of rules, normalization-features and simple customization that uses a pythonic schema-definition.
colander – 一個用於對從 XML, JSON,HTML 表單獲取的資料或其他同樣簡單的序列化資料進行驗證和反序列化的系統。
kmatch – 一種用於匹配/驗證/篩選 Python 字典的語言。
schema -一個用於對 Python 資料結構進行驗證的庫。
Schematics – 資料結構驗證。
valideer – 輕量級可擴充套件的資料驗證和適配庫。
voluptuous – 一個 Python 資料驗證庫。主要是為了驗證傳入 Python的 JSON,YAML 等資料。
反垃圾技術
幫助你和電子垃圾進行戰鬥的庫。
django-simple-captcha – 一個簡單、高度可定製的Django 應用,可以為任何Django表單新增驗證碼。
django-simple-spam-blocker- 一個用於Django的簡單的電子垃圾遮蔽工具。
標記
用來進行標記的庫。
django-taggit – 簡單的 Django 標記工具。
管理皮膚
管理介面庫。
Ajenti – 一個你的伺服器值得擁有的管理皮膚。
django-suit – Django 管理介面的一個替代品 (僅對於非商業用途是免費的)。
django-xadmin – Django admin 的一個替代品,具有很多不錯的功能。
flask-admin – 一個用於 Flask 的簡單可擴充套件的管理介面框架。
flower – 一個對 Celery 叢集進行實時監控和提供 web 管理介面的工具。
Grappelli – Django 管理介面的一個漂亮的皮膚。
Wooey – 一個 Django 應用,可以為 Python 指令碼建立 web 使用者介面。
靜態站點生成器
靜態站點生成器是一個軟體,它把文字和模板作為輸入,然後輸出HTML檔案。
Pelican – 使用 Markdown 或 ReST 來處理內容, Jinja 2 來製作主題。支援 DVCS, Disqus.。AGPL 許可。
Cactus – 為設計師設計的靜態站點生成器。
Hyde – 基於 Jinja2 的靜態站點生成器。
Nikola – 一個靜態網站和部落格生成器。
Tinkerer – Tinkerer 是一個部落格引擎/靜態站點生成器,由Sphinx驅動。
Lektor – 一個簡單易用的靜態 CMS 和部落格引擎。
程式
作業系統程式啟動及通訊庫。
envoy – 比 Python subprocess 模組更人性化。
sarge – 另一 種 subprocess 模組的封裝。
sh – 一個完備的 subprocess 替代庫。
併發和並行
用以進行併發和並行操作的庫。
multiprocessing – (Python 標準庫) 基於程式的“執行緒”介面。
threading – (Python 標準庫)更高層的執行緒介面。
eventlet – 支援 WSGI 的非同步框架。
gevent – 一個基於協程的 Python 網路庫,使用greenlet。
Tomorrow -用於產生非同步程式碼的神奇的裝飾器語法實現。
網路
用於網路程式設計的庫。
asyncio – (Python 標準庫) 非同步 I/O, 事件迴圈, 協程以及任務。
Twisted – 一個事件驅動的網路引擎。
pulsar – 事件驅動的併發框架。
diesel – 基於Greenlet 的事件 I/O 框架。
pyzmq – 一個 ZeroMQ 訊息庫的 Python 封裝。
txZMQ – 基於 Twisted 的 ZeroMQ 訊息庫的 Python 封裝。
WebSocket
幫助使用WebSocket的庫。
AutobahnPython – 給 Python 、使用的 WebSocket & WAMP 基於 Twisted 和 asyncio。
Crossbar – 開源統一應用路由(Websocket & WAMP for Python on Autobahn).
django-socketio – 給 Django 用的 WebSockets。
WebSocket-for-Python – 為Python2/3 以及 PyPy 編寫的 WebSocket 客戶端和伺服器庫。
WSGI 伺服器
相容 WSGI 的 web 伺服器
gunicorn – Pre-forked, 部分是由 C 語言編寫的。
uwsgi – uwsgi 專案的目的是開發一組全棧工具,用來建立託管服務, 由 C 語言編寫。
bjoern – 非同步,非常快速,由 C 語言編寫。
fapws3 – 非同步 (僅對於網路端),由 C 語言編寫。
meinheld – 非同步,部分是由 C 語言編寫的。
netius – 非同步,非常快速。
paste – 多執行緒,穩定,久經考驗。
rocket – 多執行緒。
waitress – 多執行緒, 是它驅動著 Pyramid 框架。
Werkzeug – 一個 WSGI 工具庫,驅動著 Flask ,而且可以很方便大嵌入到你的專案中去。
RPC 伺服器
相容 RPC 的伺服器。
SimpleJSONRPCServer – 這個庫是 JSON-RPC 規範的一個實現。
SimpleXMLRPCServer – (Python 標準庫) 簡單的 XML-RPC 伺服器實現,單執行緒。
zeroRPC – zerorpc 是一個靈活的 RPC 實現,基於 ZeroMQ 和 MessagePack。
密碼學
cryptography – 這個軟體包意在提供密碼學基本內容和方法提供給 Python 開發者。
hashids – 在 Python 中實現 hashids 。
Paramiko – SSHv2 協議的 Python (2.6+, 3.3+) ,提供客戶端和服務端的功能。
Passlib – 安全密碼儲存/雜湊庫,
PyCrypto – Python 密碼學工具箱。
PyNacl – 網路和密碼學(NaCl) 庫的 Python 繫結。
圖形使用者介面
用來建立圖形使用者介面程式的庫。
curses – 內建的 ncurses 封裝,用來建立終端圖形使用者介面。
enaml – 使用類似 QML 的Declaratic語法來建立美觀的使用者介面。
kivy – 一個用來建立自然使用者互動(NUI)應用程式的庫,可以執行在 Windows, Linux, Mac OS X, Android 以及 iOS平臺上。
pyglet – 一個Python 的跨平臺視窗及多媒體庫。
PyQt – 跨平臺使用者介面框架 Qt 的 Python 繫結 ,支援Qt v4 和 Qt v5。
PySide – P跨平臺使用者介面框架 Qt 的 Python 繫結 ,支援Qt v4。
Tkinter – Tkinter 是 Python GUI 的一個事實標準庫。
Toga – 一個 Python 原生的, 作業系統原生的 GUI 工具包。
urwid – 一個用來建立終端 GUI 應用的庫,支援元件,事件和豐富的色彩等。
wxPython – wxPython 是 wxWidgets C++ 類庫和 Python 語言混合的產物。
PyGObject – GLib/GObject/GIO/GTK+ (GTK+3) 的 Python 繫結
Flexx – Flexx 是一個純 Python 語言編寫的用來建立 GUI 程式的工具集,它使用 web 技術進行介面的展示。
遊戲開發
超讚的遊戲開發庫。
Cocos2d – cocos2d 是一個用來開發 2D 遊戲, 示例和其他圖形/互動應用的框架。基於 pyglet。
Panda3D – 由迪士尼開發的 3D 遊戲引擎,並由卡內基梅隴娛樂技術中心負責維護。使用C++編寫, 針對 Python 進行了完全的封裝。
Pygame – Pygame 是一組 Python 模組,用來編寫遊戲。
PyOgre – Ogre 3D 渲染引擎的 Python 繫結,可以用來開發遊戲和模擬程式等任何 3D 應用。
PyOpenGL – OpenGL 的 Python 繫結及其相關 APIs。
PySDL2 – SDL2 庫的封裝,基於 ctypes。
RenPy – 一個視覺小說(visual novel)引擎。
日誌
用來生成和操作日誌的庫。
logging – (Python 標準庫) 為 Python 提供日誌功能。
logbook – Logging 庫的替代品。
Eliot – 為複雜的和分散式系統建立日誌。
Raven – Sentry的 Python 客戶端。
Sentry – 實時記錄和收集日誌的伺服器。
測試
進行程式碼庫測試和生成測試資料的庫。
測試框架
unittest – (Python 標準庫) 單元測試框架。
nose – nose 擴充套件了 unittest 的功能。
contexts – 一個 Python 3.3+ 的 BDD 框架。受到C# – Machine.Specifications的啟發。
hypothesis – Hypothesis 是一個基於先進的 Quickcheck 風格特性的測試庫。
mamba – Python 的終極測試工具, 擁護BDD。
PyAutoGUI – PyAutoGUI 是一個人性化的跨平臺 GUI 自動測試模組。
pyshould- Should 風格的斷言,基於 PyHamcrest。
pytest- 一個成熟的全功能 Python 測試工具。
green- 乾淨,多彩的測試工具。
pyvows- BDD 風格的測試工具,受Vows.js的啟發。
Robot Framework – 一個通用的自動化測試框架。
Web 測試
Selenium – Selenium WebDriver 的 Python 繫結。
locust – 使用 Python 編寫的,可擴充套件的使用者載入測試工具。
sixpack – 一個和語言無關的 A/B 測試框架。
splinter – 開源的 web 應用測試工具。
Mock測試
mock – (Python 標準庫) 一個用於偽造測試的庫。
doublex – Python 的一個功能強大的 doubles 測試框架。
freezegun – 通過偽造日期模組來生成不同的時間。
httmock – 針對 Python 2.6+ 和 3.2+ 生成 偽造請求的庫。
httpretty – Python 的 HTTP 請求 mock 工具。
responses – 偽造 Python 中的 requests 庫的一個通用庫。
VCR.py – 在你的測試中記錄和重放 HTTP 互動。
物件工廠
factoryboy – 一個 Python 用的測試韌體 (test fixtures) 替代庫。
mixer – 另外一個測試韌體 (test fixtures) 替代庫,支援 Django, Flask, SQLAlchemy, Peewee 等。
modelmommy – 為 Django 測試建立隨機韌體
程式碼覆蓋率
coverage – 程式碼覆蓋率測量。
偽資料
faker – 一個 Python 庫,用來生成偽資料。
fake2db – 偽資料庫生成器。
radar – 生成隨機的日期/時間。
錯誤處理
FuckIt.py – FuckIt.py 使用最先進的技術來保證你的 Python 程式碼無論對錯都能繼續執行。
程式碼分析和Lint工具
進行程式碼分析,解析和操作程式碼庫的庫和工具。
程式碼分析
code2flow – 把你的 Python 和 JavaScript 程式碼轉換為流程圖。
pycallgraph -這個庫可以把你的Python 應用的流程(呼叫圖)進行視覺化。
pysonar2 – Python 型別推斷和檢索工具。
Lint工具
Flake8 – 模組化原始碼檢查工具: pep8, pyflakes 以及 co。
Pylint – 一個完全可定製的原始碼分析器。
pylama – Python 和 JavaScript 的程式碼審查工具。
除錯工具
用來進行程式碼除錯的庫。
偵錯程式
ipdb – IPython 啟用的 pdb。
pudb – 全屏,基於控制檯的 Python 偵錯程式。
pyringe – 可以在 Python 程式中附加和注入程式碼的偵錯程式。
wdb – 一個奇異的 web 偵錯程式,通過 WebSockets 工作。
winpdb – 一個具有圖形使用者介面的 Python 偵錯程式,可以進行遠端除錯,基於 rpdb2。
django-debug-toolbar – 為 Django 顯示各種除錯資訊。
django-devserver – 一個 Django 執行伺服器的替代品。
flask-debugtoolbar – django-debug-toolbar 的 flask 版。
效能分析器
lineprofiler – 逐行效能分析。
memoryprofiler – 監控 Python 程式碼的記憶體使用。
profiling – 一個互動式 Python 效能分析工具。
其他
pyelftools – 解析和分析 ELF 檔案以及 DWARF 除錯資訊。
python-statsd – statsd 伺服器的 Python 客戶端。
科學技術和資料分析
用來進行科學計算和資料分析的庫。
astropy – 一個天文學 Python 庫。
bcbio-nextgen – 這個工具箱為全自動高通量測序分析提供符合最佳實踐的處理流程。
bccb – 生物分析相關程式碼集合
Biopython – Biopython 是一組可以免費使用的用來進行生物計算的工具。
blaze – NumPy 和 Pandas 的大資料介面。
cclib – 一個用來解析和解釋計算化學軟體包輸出結果的庫。
NetworkX – 一個為複雜網路設計的高效能軟體。
Neupy – 執行和測試各種不同的人工神經網路演算法。
Numba – Python JIT (just in time) 編譯器,針對科學用的 Python ,由Cython 和 NumPy 的開發者開發。
NumPy – 使用 Python 進行科學計算的基礎包。
Open Babel – 一個化學工具箱,用來描述多種化學資料。
Open Mining – 使用 Python 挖掘商業情報 (BI) (Pandas web 介面)。
orange – 通過視覺化程式設計或 Python 指令碼進行資料探勘,資料視覺化,分析和機器學習。
Pandas – 提供高效能,易用的資料結構和資料分析工具。
PyDy – PyDy 是 Python Dynamics 的縮寫,用來為動力學運動建模工作流程提供幫助, 基於 NumPy, SciPy, IPython 和 matplotlib。
PyMC – 馬爾科夫鏈蒙特卡洛取樣工具。
RDKit – 化學資訊學和機器學習軟體。
SciPy – 由一些基於 Python ,用於數學,科學和工程的開源軟體構成的生態系統。
statsmodels – 統計建模和計量經濟學。
SymPy – 一個用於符號數學的 Python 庫。
zipline – 一個 Python 演算法交易庫。
資料視覺化
進行資料視覺化的庫。 參見: awesome-javascript。
matplotlib – 一個 Python 2D 繪相簿。
bokeh – 用 Python 進行互動式 web 繪圖。
ggplot – ggplot2 給 R 提供的 API 的 Python 版本。
plotly – 協同 Python 和 matplotlib 工作的 web 繪相簿。
pygal – 一個 Python SVG 圖表建立工具。
pygraphviz – Graphviz 的 Python 介面。
PyQtGraph – 互動式實時2D/3D/影象繪製及科學/工程學元件。
SnakeViz – 一個基於瀏覽器的 Python’s cProfile 模組輸出結果檢視工具。
vincent – 把 Python 轉換為 Vega 語法的轉換工具。
VisPy – 基於 OpenGL 的高效能科學視覺化工具。
計算機視覺
計算機視覺庫。
OpenCV – 開源計算機視覺庫。
SimpleCV – 一個用來建立計算機視覺應用的開源框架。
機器學習
機器學習庫。 參見: awesome-machine-learning.
Crab – 靈活、快速的推薦引擎。
gensim – 人性化的話題建模庫。
hebel – GPU 加速的深度學習庫。
NuPIC – 智慧計算 Numenta 平臺。
pattern – Python 網路挖掘模組。
PyBrain – 另一個 Python 機器學習庫。
Pylearn2 – 一個基於 Theano 的機器學習庫。
python-recsys – 一個用來實現推薦系統的 Python 庫。
scikit-learn – 基於 SciPy 構建的機器學習 Python 模組。
pydeep – Python 深度學習庫。
vowpalporpoise – 輕量級 Vowpal Wabbit 的 Python 封裝。
skflow – 一個 TensorFlow 的簡化介面(模仿 scikit-learn)。
MapReduce
MapReduce 框架和庫。
dpark – Spark 的 Python 克隆版,一個類似 MapReduce 的框架。
dumbo – 這個 Python 模組可以讓人輕鬆的編寫和執行 Hadoop 程式。
luigi – 這個模組幫你構建批處理作業的複雜流水線。
mrjob – 在 Hadoop 或 Amazon Web Services 上執行 MapReduce 任務。
PySpark – Spark 的 Python API 。
streamparse – 執行鍼對事實資料流的 Python 程式碼。整合了Apache Storm。
函數語言程式設計
使用 Python 進行函數語言程式設計。
CyToolz – Toolz 的 Cython 實現 : 高效能函式式工具。
fn.py – 在 Python 中進行函數語言程式設計 : 實現了一些享受函數語言程式設計缺失的功能。
funcy – 炫酷又實用的函式式工具。
Toolz – 一組用於迭代器,函式和字典的函數語言程式設計工具。
第三方 API
用來訪問第三方 API的庫。 參見: List of Python API Wrappers and Libraries。
apache-libcloud – 一個為各種雲設計的 Python 庫。
boto – Amazon Web Services 的 Python 介面。
django-wordpress – WordPress models and views for Django.
facebook-sdk – Facebook 平臺的 Python SDK.
facepy – Facepy 讓和 Facebook’s Graph API 的互動變得更容易。
gmail – Gmail 的 Python 介面。
google-api-python-client – Python 用的 Google APIs 客戶端庫。
gspread – Google 電子表格的 Python API.
twython – Twitter API 的封裝。
DevOps 工具
用於 DevOps 的軟體和庫。
Ansible – 一個非常簡單的 IT 自動化平臺。
SaltStack – 基礎設施自動化和管理系統。
OpenStack – 用於構建私有和公有云的開源軟體。
Docker Compose – 快速,分離的開發環境,使用 Docker。
Fabric – 一個簡單的,Python 風格的工具,用來進行遠端執行和部署。
cuisine – 為 Fabric 提供一系列高階函式。
Fabtools – 一個用來編寫超讚的 Fabric 檔案的工具。
gitapi – Git 的純 Python API。
hgapi – Mercurial 的純 Python API。
honcho – Foreman的 Python 克隆版,用來管理基於Procfile的應用。
pexpect – Controlling interactive programs in a pseudo-terminal like 在一個偽終端中控制互動程式,就像 GNU expect 一樣。
psutil – 一個跨平臺程式和系統工具模組。
supervisor – UNIX 的程式控制系統。
任務排程
任務排程庫。
APScheduler – 輕巧但強大的程式內任務排程,使你可以排程函式。
django-schedule – 一個 Django 排程應用。
doit – 一個任務執行和構建工具。
gunnery – 分散式系統使用的多用途任務執行工具 ,具有 web 互動介面。
Joblib – 一組為 Python 提供輕量級作業流水線的工具。
Plan – 如有神助地編寫 crontab 檔案。
schedule – 人性化的 Python 任務排程庫。
Spiff – 使用純 Python 實現的強大的工作流引擎。
TaskFlow – 一個可以讓你方便執行任務的 Python 庫,一致並且可靠。
外來函式介面
使用外來函式介面的庫。
cffi – 用來呼叫 C 程式碼的外來函式介面。
ctypes – (Python 標準庫) 用來呼叫 C 程式碼的外來函式介面。
PyCUDA – Nvidia CUDA API 的封裝。
SWIG – 簡化的封裝和介面生成器。
高效能
讓 Python 更快的庫。
Cython – 優化的 Python 靜態編譯器。使用型別混合使 Python 編譯成 C 或 C++ 模組來獲得效能的極大提升。
PeachPy – 嵌入 Python 的 x86-64 彙編器。可以被用作 Python 內聯的彙編器或者是獨立的彙編器,用於 Windows, Linux, OS X, Native Client 或者 Go 。
PyPy – 使用 Python 實現的 Python。直譯器使用黑魔法加快 Python 執行速度且不需要加入額外的型別資訊。
Pyston – 使用 LLVM 和現代 JIT 技術構建的 Python 實現,目標是為了獲得很好的效能。
Stackless Python – 一個強化版的 Python。
微軟的 Windows平臺
在 Windows 平臺上進行 Python 程式設計。
Python(x,y) – 面向科學應用的 Python 發行版,基於 Qt 和 Spyder。
pythonlibs – 非官方的 Windows 平臺 Python 擴充套件二進位制包。
PythonNet – Python 與 .NET 公共語言執行庫 (CLR)的整合。
PyWin32 – 針對 Windows 的Python 擴充套件。
WinPython – Windows 7/8 系統下行動式開發環境。
網路視覺化和SDN
用來進行網路視覺化和SDN(軟體定義網路)的工具和庫。
Mininet – 一款流行的網路模擬器以及用 Python 編寫的 API。
POX – 一個針對基於 Python 的軟體定義網路應用(例如 OpenFlow SDN 控制器)的開源開發平臺。
Pyretic – 火熱的 SDN 程式語言中的一員,為網路交換機和模擬器提供強大的抽象能力。
SDX Platform – 基於 SDN 的 IXP 實現,影響了 Mininet, POX 和 Pyretic。
硬體
用來對硬體進行程式設計的庫。
ino -操作Arduino的命令列工具。
Pyro – Python 機器人程式設計庫。
PyUserInput – 跨平臺的,控制滑鼠和鍵盤的模組。
scapy – 一個非常棒的運算元據包的庫。
wifi – 一個 Python 庫和命令列工具用來在 Linux 平臺上操作WiFi。
Pingo – Pingo 為類似Raspberry Pi,pcDuino, Intel Galileo等裝置提供統一的API用以程式設計。
相容性
幫助從 Python 2 向 Python 3遷移的庫。
Python-Future – 這就是 Python 2 和 Python 3 之間丟失的那個相容性層。
Python-Modernize – 使 Python 程式碼更加現代化以便最終遷移到 Python 3。
Six – Python 2 和 3 的相容性工具。
雜項
不屬於上面任何一個類別,但是非常有用的庫。
blinker – 一個快速的 Python 程式內訊號/事件分發系統。
itsdangerous – 一系列輔助工具用來將可信的資料傳入不可信的環境。
pluginbase – 一個簡單但是非常靈活的 Python 外掛系統。
Pychievements – 一個用來建立和追蹤成就的 Python 框架。
Tryton – 一個通用商務框架。
演算法和設計模式
Python 實現的演算法和設計模式。
algorithms -一個 Python 演算法模組
python-patterns – Python 設計模式的集合。
sortedcontainers – 快速,純 Python 實現的SortedList,SortedDict 和 SortedSet 型別。
編輯器外掛
編輯器和 IDE 的外掛
Emacs
Elpy – Emacs Python 開發環境。
Sublime Text
SublimeJEDI – 一個 Sublime Text 外掛,用來使用超讚的自動補全庫 Jedi。
Anaconda – Anaconda 把你的 Sublime Text 3 變成一個功能齊全的 Python IDE。
Vim
YouCompleteMe – 引入基於 Jedi 的 Python 自動補全引擎。
Jedi-vim – 繫結 Vim 和 Jedi 自動補全庫對 Python 進行自動補全。
Python-mode – 將 Vim 變成 Python IDE 的一款多合一外掛。
Visual Studio
PTVS – Visual Studio 的 Python 工具
整合開發環境
流行的 Python 整合開發環境。
PyCharm – 商業化的 Python IDE ,由 JetBrains 開發。也有免費的社群版提供。
LiClipse – 基於 Eclipse 的免費多語言 IDE 。使用 PyDev 來支援 Python 。
Spyder – 開源 Python IDE。
服務
線上工具和簡化開發的 API 。
持續整合
參見: awesome-CIandCD.
Travis CI – 一個流行的工具,為你的開源和私人專案提供持續整合服務。(僅支援 GitHub)
CircleCI – 一個持續整合工具,可以非常快速的進行並行測試。 (僅支援 GitHub)
Vexor CI – 一個為私人 app 提供持續整合的工具,支援按分鐘付費。
Wercker – 基於 Docker 平臺,用來構建和部署微服務。
程式碼質量
Codacy – 自動化程式碼審查,更加快速的釋出高質量程式碼。對於開源專案是免費的。
QuantifiedCode – 一個資料驅動、自動、持續的程式碼審查工具。
資源
在這裡可以找到新的 Python 庫。
網站
r/Python
CoolGithubProjects
Django Packages
Full Stack Python
Python 3 Wall of Superpowers
Python Hackers
Python ZEEF
Trending Python repositories on GitHub today
PyPI Ranking
週刊
Import Python Newsletter
Pycoder’s Weekly
Python Weekly
Twitter
@codetengu
@getpy
@planetpython
@pycoders
@pypi
@pythontrending
@PythonWeekly
原生:
系統呼叫的subprocess
多執行緒的multiprocessing
系統管理推薦fabric和salt
WEB框架推薦flask和tornado
ORM推薦SQLAlchemy
功能型的都是各取所需 就說些好用的吧
Tornado: 和其他Python框架的架構可謂大相徑庭,Request的處理方式也很舒服,特別適合REST,誰用誰知道
Mako: 個人認為是最好的Template,簡單 效能好
SQLAlchemy: 快一統ORM了吧
Quixote:其實還是蠻好用的
pyQuery: 用jQuery的語法寫爬蟲 略爽
我希望你喜歡今天的文章。請在評論區留下你的看法。如果你覺得有哪個庫被遺漏了請在評論裡告訴我,我會把它加上去。請留意下一期的文章。
相關文章
- python常用標準庫Python
- Python Web開發常用的第三方庫有哪些?Python教程!PythonWeb
- python常用的資料庫有哪些?Python資料庫
- 【推薦】5個常用的Python標準庫!Python
- 什麼是JSTL標籤?常用的標籤庫有哪些?JS
- Python資料分析常用庫有哪些?Python學習!Python
- python常用的資料庫有哪些?五大類!Python資料庫
- python常用標準庫(壓縮包模組zipfile和tarfile)Python
- python標準庫目錄Python
- Python標準庫(待續)Python
- Python標準庫一覽Python
- Python常用資料分析庫有哪些?Python學習班!Python
- 常用的Python GUI庫有哪些?這四個必不可少!PythonGUI
- 【python】Python標準庫defaultdict模組Python
- python標準庫00學習準備Python
- python 標準庫和第3方庫的介紹Python
- Python標準庫06 子程式Python
- Python標準庫(1) — Itertools模組Python
- python標準庫SocketServer學習PythonServer
- 【Linux基礎教程】常用的Python MySQL連線庫有哪些?LinuxPythonMySql
- Python標準庫中隱藏的利器Python
- Python gevent 是如何 patch 標準庫的 ?Python
- C++標準庫有四種智慧指標C++指標
- python常用標準庫(os系統模組、shutil檔案操作模組)Python
- Python 快速教程(標準庫):學習準備Python
- Python標準庫14 資料庫 (sqlite3)Python資料庫SQLite
- 盤點Python最常用的第三方庫!Python
- python協程(yield、asyncio標準庫、gevent第三方)、非同步的實現Python非同步
- python標準庫模組放在哪裡?Python
- python官方標準庫(中文版)Python
- Python 2.* 標準庫簡介Python
- Python標準庫系列之Memcache模組Python
- python:模組1——標準庫簡介Python
- Python標準庫之functools/itertools/operatorPython
- Python標準庫系列之Redis模組PythonRedis
- C 標準庫 -
- CUJ:標準庫:標準庫中的搜尋演算法 (轉)演算法
- 常用的標籤分類有哪些