Airflow 中文文件:用Dask擴充套件
DaskExecutor
允許您在Dask分散式群集中執行Airflow任務。
Dask叢集可以在單個機器上執行,也可以在遠端網路上執行。 有關完整詳細資訊,請參閱分散式文件 。
要建立叢集,首先啟動排程程式:
# default settings for a local cluster
DASK_HOST = 127 .0.0.1
DASK_PORT = 8786
dask-scheduler --host $DASK_HOST --port $DASK_PORT
接下來,在任何可以連線到主機的計算機上啟動至少一個Worker:
dask-worker $DASK_HOST : $DASK_PORT
相關文章
- Airflow 中文文件:快速開始AI
- ?用Chrome擴充套件管理器, 管理你的擴充套件Chrome套件
- VSCode擴充套件應用VSCode套件
- kotlin 擴充套件(擴充套件函式和擴充套件屬性)Kotlin套件函式
- 中文分詞 PHP 擴充套件 SCWS 安裝中文分詞PHP套件
- 【Kotlin】擴充套件屬性、擴充套件函式Kotlin套件函式
- 並查集擴充套件應用並查集套件
- easyui應用(四)--- easyui擴充套件UI套件
- 寫一個Laravel中文驗證擴充套件包Laravel套件
- SpringMVC 擴充套件SpringMVC套件
- Mybatis擴充套件MyBatis套件
- 擴充套件工具套件
- Sanic 擴充套件套件
- ORACLE 擴充套件Oracle套件
- JMeter 擴充套件開發:擴充套件 TCP 取樣器JMeter套件TCP
- 使用Kotlin擴充套件函式擴充套件Spring Data案例Kotlin套件函式Spring
- ASP.NET Core擴充套件庫之Http通用擴充套件ASP.NET套件HTTP
- 提高擴充套件性套件
- LINQ擴充套件方法套件
- HttpContext擴充套件類HTTPContext套件
- Json擴充套件方法JSON套件
- 擴充套件BSGS/exBSGS套件
- 擴充套件包上傳套件
- Flask 自建擴充套件Flask套件
- Nmap 擴充套件(四)套件
- 分類擴充套件套件
- 擴充套件表示式套件
- 新增php擴充套件PHP套件
- 可擴充套件性套件
- 19-擴充套件套件
- iOS 通知擴充套件iOS套件
- swift擴充套件ExtensionsSwift套件
- DOM部分擴充套件套件
- PHP擴充套件開發就是一個自己的PHP擴充套件PHP套件
- 實用的可選項(Optional)擴充套件套件
- chrome擴充套件應用開發快速科普Chrome套件
- 基本於dcat-admin 的介面文件擴充套件-開箱即用套件
- 乾貨丨如何水平擴充套件和垂直擴充套件DolphinDB叢集?套件