Python/ target=_blank class=infotextkey>Python為啥這么火,這么多人學,就是因為簡單好學,功能強大,整個社區非常活躍,資料很多。而且這語言涉及了方方面面,比如自動化測試,運維,爬蟲,數據分析,機器學習,金融領域,后端開發,云計算,游戲開發都有涉及。
萬丈高樓平地起,Python這座大廈能夠如此強大,就是擁有強大的成千上萬的庫的支持,無數牛x的輪子在支持這座大廈,今天好學編程來一起梳理一下,俯瞰整個Python寶庫。
我大概列了一下整個Python庫的應用的方法面面,粗略算算就有20幾個方向。左右兩邊分兩個方向,左邊負責進攻(主外),每一項單獨拉出來都是精品,都是Python應用里面拳頭產品;右邊負責守(主內),都是涉及底層的配置,算是整個大廈的地基。
下面好學編程挑選每個領域的的精品庫,展現給大家,看完之后,你一定會大叫,WC,這么多庫我都沒有見過~~
1、Python大廈的底層基建
環境管理
管理 Python 版本和環境的工具
p:非常簡單的交互式 python 版本管理工具。
pyenv:簡單的 Python 版本管理工具。
Vex:可以在虛擬環境中執行命令。
virtualenv:創建獨立 Python 環境的工具。
buildout:在隔離環境初始化后使用聲明性配置管理。
包管理
管理包和依賴的工具。
pip:Python 包和依賴關系管理工具。
pip-tools:保證 Python 包依賴關系更新的一組工具。
pipenv:Python 官方推薦的新一代包管理工具。
poetry: 可完全取代 setup.py 的包管理工具。
conda:跨平臺,Python 二進制包管理工具。
Curdling:管理 Python 包的命令行工具。
wheel:Python 分發的新標準,意在取代 eggs。
分發
打包為可執行文件以便分發。
PyInstaller:將 Python 程序轉換成獨立的執行文件(跨平臺)。
cx_Freeze:將python程序轉換為帶有一個動態鏈接庫的可執行文件。
dh-virtualenv:構建并將 virtualenv 虛擬環境作為一個 Debian 包來發布。
Nuitka:將腳本、模塊、包編譯成可執行文件或擴展模塊。
py2App:將 Python 腳本變為獨立軟件包(mac OS X)。
py2exe:將 Python 腳本變為獨立軟件包(windows)。
pynsist:一個用來創建 Windows 安裝程序的工具,可以在安裝程序中打包 Python 本身。
配置
用來保存和解析配置的庫。
config:logging 模塊作者寫的分級配置模塊。
ConfigObj:INI 文件解析器,帶驗證功能。
ConfigParser:(Python 標準庫) INI 文件解析器。
profig:通過多種格式進行配置,具有數值轉換功能。
python-decouple:將設置和代碼完全隔離。
2、Python大廈的管理配置
文件
AIofiles:基于 asyncio,提供文件異步操作
imghdr:(Python 標準庫)檢測圖片類型
mimetypes:(Python 標準庫)將文件名映射為 MIME 類型
path.py:對 os.path 進行封裝的模塊
pathlib:(Python3.4+ 標準庫)跨平臺的、面向對象的路徑操作庫
python-magic:文件類型檢測的第三方庫 libmagic 的 Python 接口
Unipath:用面向對象的方式操作文件和目錄
watchdog:管理文件系統事件的 API 和 shell 工具
日期和時間
操作日期和時間的類庫。
arrow:更好的 Python 日期時間操作類庫。
Chronyk:Python 3 的類庫,用于解析手寫格式的時間和日期。
dateutil:Python datetime 模塊的擴展。
delorean:解決 Python 中有關日期處理的棘手問題的庫。
maya:人性化的時間處理庫。
moment:一個用來處理時間和日期的 Python 庫。靈感來自于 Moment.js。
pendulum:一個比 arrow 更具有明確的,可預測的行為的時間操作庫。
PyTime:一個簡單易用的 Python 模塊,用于通過字符串來操作日期/時間。
pytz:現代以及歷史版本的世界時區定義。將時區數據庫引入 Python。
when.py:提供用戶友好的函數來幫助用戶進行常用的日期和時間操作。
文本處理
用于解析和操作文本的庫。
- 通用
chardet:字符編碼檢測器,兼容 Python2 和 Python3。
difflib:(Python 標準庫)幫助我們進行差異化比較。
ftfy:讓 Unicode 文本更完整更連貫。
fuzzywuzzy:模糊字符串匹配。
Levenshtein:快速計算編輯距離以及字符串的相似度。
pangu.py:在中日韓語字符和數字字母之間添加空格。
pypinyin:漢字拼音轉換工具 Python 版。
shortuuid:一個生成器庫,用以生成簡潔的,明白的,URL 安全的 UUID。
simplejson:Python 的 JSON 編碼、解碼器。
unidecode:Unicode 文本的 ASCII 轉換形式 。
uniout:打印可讀的字符,而不是轉義的字符串。
xpinyin:一個用于把漢字轉換為拼音的庫。
yfiglet-figlet:pyfiglet -figlet 的 Python 實現。
flashtext: 一個高效的文本查找替換庫。
- Slug 化
awesome-slugify:一個 Python slug 化庫,可以保持 Unicode。
python-slugify:Python slug 化庫,可以把 unicode 轉化為 ASCII。
unicode-slugify:一個 slug 工具,可以生成 unicode slugs ,需要依賴 Django 。
- 解析器
phonenumbers:解析,格式化,儲存,驗證電話號碼。
PLY:lex 和 yacc 解析工具的 Python 實現。
Pygments:通用語法高亮工具。
pyparsing:生成通用解析器的框架。
python-nameparser:把一個人名分解為幾個獨立的部分。
python-user-agents:瀏覽器 user agent 解析器。
sqlparse:一個無驗證的 SQL 解析器。
辦公文本格式處理
- 通用
tablib:一個用來處理中表格數據的模塊。
python-office:一個用來自動化辦公的第三方庫。
- Office
Marmir:把輸入的 Python 數據結構轉換為電子表單。
openpyxl:一個用來讀寫 Excel 2010 xlsx/xlsm/xltx/xltm 文件的庫。
pyexcel:一個提供統一 API,用來讀寫,操作 Excel 文件的庫。
python-docx:讀取,查詢以及修改 Microsoft word 2007/2008 docx 文件。
relatorio:模板化 OpenDocument 文件。
unoconv:在 LibreOffice/OpenOffice 支持的任意文件格式之間進行轉換。
XlsxWriter:一個用于創建 Excel .xlsx 文件的 Python 模塊。
xlwings:一個使得在 Excel 中方便調用 Python 的庫(反之亦然),基于 BSD 協議。
xlwt:讀寫 Excel 文件的數據和格式信息。
PDFMiner:一個用于從 PDF 文檔中抽取信息的工具。
PyPDF2:一個可以分割,合并和轉換 PDF 頁面的庫。
ReportLab:快速創建富文本 PDF 文檔。
- Markdown
Mistune:快速并且功能齊全的純 Python 實現的 Markdown 解析器。
Python-Markdown:John Gruber’s Markdown 的 Python 版實現。
Python-Markdown2:純 Python 實現的 Markdown 解析器,比 Python-Markdown 更快,更準確
- YAML
PyYAML:Python 版本的 YAML 解析器。
- CSV
csvkit:用于轉換和操作 CSV 的工具。
配置
用來保存和解析配置的庫。
config:logging 模塊作者寫的分級配置模塊。
ConfigObj:INI 文件解析器,帶驗證功能。
ConfigParser:(Python 標準庫) INI 文件解析器。
profig:通過多種格式進行配置,具有數值轉換功能。
python-decouple:將設置和代碼完全隔離。
命令行工具
用于創建命令行程序的庫。
- 命令行程序開發
asciimatics:跨平臺,全屏終端包(即鼠標/鍵盤輸入和彩色,定位文本輸出),完整的復雜動畫和特殊效果的高級 API。
cement:Python 的命令行程序框架。
click:一個通過組合的方式來創建精美命令行界面的包。
cliff:一個用于創建命令行程序的框架,可以創建具有多層命令的命令行程序。
clint:Python 命令行程序工具。
colorama:跨平臺彩色終端文本。
docopt:Python 風格的命令行參數解析器。
Gooey:一條命令,將命令行程序變成一個 GUI 程序。
python-prompt-toolkit:一個用于構建強大的交互式命令行程序的庫。
python-fire:google 出品的一個基于 Python 類的構建命令行界面的庫。
Pythonpy:在命令行中直接執行任何 Python 指令。
- 生產力工具
aws-cli:Amazon Web Services 的通用命令行界面。
bashplotlib:在終端中進行基本繪圖。
caniusepython3:判斷是哪個項目妨礙你你移植到 Python3。
cookiecutter:從 cookiecutters(項目模板)創建項目的一個命令行工具。
doitlive:一個用來在終端中進行現場演示的工具。
pyftpdlib:一個速度極快和可擴展的 Python FTP 服務庫。
howdoi:通過命令行獲取即時的編程問題解答。
httpie:一個命令行 HTTP 客戶端,cURL 的替代品,易用性更好。
PathPicker:從 bash 輸出中選出文件。
percol:向 UNIX shell 傳統管道概念中加入交互式選擇功能。
SAWS:一個加強版的 AWS 命令行。
thefuck:修正你之前的命令行指令。
mycli:一個 MySQL 命令行客戶端,具有自動補全和語法高亮功能。
pgcli:Postgres 命令行工具,具有自動補全和語法高亮功能。
try:一個從來沒有更簡單的命令行工具,用來試用 python 庫。
3、Python大廈的倉庫
數據庫
Python 實現的數據庫。
pickleDB:一個簡單,輕量級鍵值儲存數據庫。
PipelineDB:流式 SQL 數據庫。
TinyDB:一個微型的,面向文檔型數據庫。
ZODB:一個 Python 原生對象數據庫。一個鍵值和對象圖數據庫。
數據庫驅動
用來連接和操作數據庫的庫。
- MySQL:awesome-mysql 系列
aiomysql:基于 asyncio 的異步 MySQL 數據庫操作庫。
mysql-python:Python 的 MySQL 數據庫連接器。
ysqlclient:mysql-python 分支,支持 Python 3。
oursql:一個更好的 MySQL 連接器,支持原生預編譯指令和 BLOBs。
PyMySQL:純 Python MySQL 驅動,兼容 mysql-python。
- PostgreSQL
psycopg2:Python 中最流行的 PostgreSQL 適配器。
queries:psycopg2 庫的封裝,用來和 PostgreSQL 進行交互。
txpostgres:基于 Twisted 的異步 PostgreSQL 驅動。
- 其他關系型數據庫
apsw:另一個 Python SQLite 封裝。
dataset:在數據庫中存儲 Python 字典
pymssql:一個簡單的 Microsoft SQL Server 數據庫接口。
- NoSQL 數據庫
asyncio-redis:基于 asyncio 的 redis 客戶端 (PEP 3156)。
cassandra-python-driver:Cassandra 的 Python 驅動。
HappyBase:一個為 Apache HBase 設計的,對開發者友好的庫。
Plyvel:一個快速且功能豐富的 LevelDB 的 Python 接口。
py2neo:Neo4j restful 接口的 Python 封裝客戶端。
pycassa:Cassandra 的 Python Thrift 驅動。
PyMongo:MongoDB 的官方 Python 客戶端。
redis-py:Redis 的 Python 客戶端。
telephus:基于 Twisted 的 Cassandra 客戶端。
txRedis:基于 Twisted 的 Redis 客戶端。
4、Python大廈的網絡通訊
網絡
用于網絡編程的庫。
asyncio:(Python 標準庫) 異步 I/O, 事件循環, 協程以及任務。
Twisted:一個事件驅動的網絡引擎。
pulsar:事件驅動的并發框架。
diesel:基于 Greenlet 的事件 I/O 框架。
pyzmq:一個 ZeroMQ 消息庫的 Python 封裝。
Toapi:一個輕巧,簡單,快速的 Flask 庫,致力于為所有網站提供 API 服務。
txZMQ:基于 Twisted 的 ZeroMQ 消息庫的 Python 封裝。
HTTP
使用 HTTP 的庫。
aiohttp:基于 asyncio 的異步 HTTP 網絡庫。
requests:人性化的 HTTP 請求庫。
grequests:requests 庫 + gevent ,用于異步 HTTP 請求.
httplib2:全面的 HTTP 客戶端庫。
treq:類似 requests 的 Python API 構建于 Twisted HTTP 客戶端之上。
urllib3:一個具有線程安全連接池,支持文件 post,清晰友好的 HTTP 庫。
WebSocket 幫助使用 WebSocket 的庫。
AutobahnPython:給 Python 、使用的 WebSocket & WAMP 基于 Twisted 和 asyncio。
Crossbar:開源統一應用路由(Websocket & WAMP for Python on Autobahn)。
django-socketio:給 Django 用的 WebSockets。
WebSocket-for-Python:為 Python2/3 以及 PyPy 編寫的 WebSocket 客戶端和服務器庫。
WSGI 服務器
兼容 WSGI 的 web 服務器
gunicorn:Pre-forked, 部分是由 C 語言編寫的。
uwsgi:uwsgi 項目的目的是開發一組全棧工具,用來建立托管服務, 由 C 語言編寫。
bjoern:異步,非常快速,由 C 語言編寫。
fapws3:異步 (僅對于網絡端),由 C 語言編寫。
meinheld:異步,部分是由 C 語言編寫的。
paste:多線程,穩定,久經考驗。
rocket:多線程。
waitress:多線程, 是它驅動著 Pyramid 框架。
Werkzeug:一個 WSGI 工具庫,驅動著 Flask ,而且可以很方便大嵌入到你的項目中去。
Web 框架
全棧 Web 框架。
Django:Python 界最流行的 web 框架。
Flask:一個 Python 微型框架。
pyramid:一個小巧,快速,接地氣的開源 Python web 框架。
Bottle:一個快速小巧,輕量級的 WSGI 微型 web 框架。
CherryPy:一個極簡的 Python web 框架,服從 HTTP/1.1 協議且具有 WSGI 線程池。
TurboGears:一個可以擴展為全棧解決方案的微型框架。
Tornado:一個 web 框架和異步網絡庫。
sanic:基于 Python3.5+ 的異步網絡框架。
starlette: 一款輕量級,高性能的 ASGI 框架
電子商務
用于電子商務以及支付的框架和庫。
django-oscar:一個用于 Django 的開源的電子商務框架。
django-shop:一個基于 Django 的店鋪系統。
Cartridge:一個基于 Mezzanine 構建的購物車應用。
shoop:一個基于 Django 的開源電子商務平臺。
alipay:非官方的 Python 支付寶 API。
merchant:一個可以接收來自多種支付平臺支付的 Django 應用。
money:一個貨幣類庫。帶有可選的 CLDR 后端本地化格式,提供可擴展的貨幣兌換解決方案。
python-currencies:顯示貨幣格式以及它的數值。
RESTful API
用來開發 RESTful APIs 的庫
- Django
django-rest-framework:一個強大靈活的工具,用來構建 web API。
django-tastypie:為 Django 應用開發 API。
django-formapi:為 Django 的表單驗證,創建 JSON APIs 。
- Flask
flask-api:為 flask 開發的,可瀏覽 Web APIs 。
flask-restful:為 flask 快速創建 REST APIs 。
flask-restless:為 SQLAlchemy 定義的數據庫模型創建 RESTful APIs 。
flask-api-utils:為 Flask 處理 API 表示和驗證。
eve:REST API 框架,由 Flask, MongoDB 等驅動。
- Pyramid
cornice:一個 Pyramid 的 REST 框架 。
- 與框架無關的
falcon:一個用來建立云 API 和 web app 后端的高性能框架。
sandman:為現存的數據庫驅動系統自動創建 REST APIs 。
restless:框架無關的 REST 框架 ,基于從 Tastypie 學到的知識。
ripozo:快速創建 REST/HATEOAS/Hypermedia APIs。
模板引擎
模板生成和詞法解析的庫和工具。
Jinja2:一個現代的,對設計師友好的模板引擎。
Chameleon:一個 html/XML 模板引擎。模仿了 ZPT(Zope Page Templates), 進行了速度上的優化。
Genshi:Python 模板工具,用以生成 web 感知的結果。
Mako:Python 平臺的超高速輕量級模板。
隊列
處理事件以及任務隊列的庫。
celery:一個異步任務隊列/作業隊列,基于分布式消息傳遞。
huey:小型多線程任務隊列。
mrq:Mr. Queue -一個 Python 的分布式 worker 任務隊列, 使用 Redis 和 gevent。
rq:簡單的 Python 作業隊列。
simpleq:一個簡單的,可無限擴張的,基于亞馬遜 SQS 的隊列。
搜索
對數據進行索引和執行搜索查詢的庫和軟件。
django-haystack:Django 模塊化搜索。
elasticsearch-py:Elasticsearch 的官方底層 Python 客戶端。
elasticsearch-dsl-py:Elasticsearch 的官方高級 Python 客戶端。
solrpy:solr 的 Python 客戶端。
Whoosh:一個快速的純 Python 搜索引擎庫。
電子郵件
用來發送和解析電子郵件的庫。
django-celery-ses:帶有 AWS SES 和 Celery 的 Django email 后端。
envelopes:供人類使用的電子郵件庫。
flanker:一個 email 地址和 Mime 解析庫。
imbox:Python IMAP 庫。
inbox.py:Python SMTP 服務器。
inbox:一個開源電子郵件工具箱。
lamson:Python 風格的 SMTP 應用服務器。
mailjet:Mailjet API 實現,用來提供批量發送郵件,統計等功能。
marrow.mailer:高性能可擴展郵件分發框架。
modoboa:一個郵件托管和管理平臺,具有現代的、簡約的 Web UI。
pyzmail:創建,發送和解析電子郵件。
Talon:Mailgun 庫,用來抽取信息和簽名。
yagmail:yagmail是一個GMAIL / SMTP客戶端,旨在使其盡可能簡單地發送電子郵件。
URL 處理
解析 URLs 的庫
furl:一個讓處理 URL 更簡單小型 Python 庫。
purl:一個簡單的,不可變的 URL 類,具有簡潔的 API 來進行詢問和處理。
pyshorteners:一個純 Python URL 縮短庫。
shorturl:生成短小 URL 和類似 http://bit.ly 短鏈的 Python 實現。
webargs:一個解析 HTTP 請求參數的庫,內置對流行 web 框架的支持,包括 Flask, Django, Bottle, Tornado 和 Pyramid。
5、Python大廈的動力系統
進程
操作系統進程啟動及通信庫。
envoy:比 Python subprocess 模塊更人性化。
sarge:另一 種 subprocess 模塊的封裝。
sh:一個完備的 subprocess 替代庫。
并發和并行
用以進行并發和并行操作的庫。
multiprocessing:(Python 標準庫) 基于進程的“線程”接口。
threading:(Python 標準庫)更高層的線程接口。
eventlet:支持 WSGI 的異步框架。
gevent:一個基于協程的 Python 網絡庫,使用 greenlet。
Tomorrow:用于產生異步代碼的神奇的裝飾器語法實現。
uvloop:在 libuv 之上超快速實現 asyncio 事件循環。
以上就是本次分享的全部內容,想學習更多編程技巧,歡迎持續關注好學編程!