Flink提交Job的方式以及引數設定
引數介紹
./bin/flink run -t yarn-session \ -Dyarn.application.id=application_XXXX_YY \ ./examples/streaming/TopSpeedWindowing.jar ./bin/flink run -t yarn-per-job --detached ./examples/streaming/TopSpeedWindowing.jar ./bin/flink run-application -t yarn-application ./examples/streaming/TopSpeedWindowing.jar yn(實際) = Math.ceil(p/ys) ys(總共) = yn(實際) * ys(指定) ys(使用) = p(指定) flink run -c,--class Flink應用程式的入口 -C,--classpath 指定所有節點都可以訪問到的url,可用於多個應用程式都需要的工具類載入 -d,--detached 是否使用分離模式,就是提交任務,cli是否退出,加了-d引數,cli會退出 -n,--allowNonRestoredState 允許跳過無法還原的savepoint。比如刪除了程式碼中的部分operator -p,--parallelism 執行並行度 -s,--fromSavepoint 從savepoint恢復任務 -sae,--shutdownOnAttachedExit 以attached模式提交,客戶端退出的時候關閉叢集 flink yarn-cluster 模式 -d,--detached 是否使用分離模式 -m,--jobmanager 指定提交的jobmanager -yat,--yarnapplicationType 設定yarn應用的型別 -yD 使用給定屬性的值 -yd,--yarndetached 使用yarn分離模式 -yh,--yarnhelp yarn session的幫助 -yid,--yarnapplicationId 掛到正在執行的yarnsession上 -yj,--yarnjar Flink jar檔案的路徑 -yjm,--yarnjobManagerMemory jobmanager的記憶體(單位M) -ynl,--yarnnodeLabel 指定 YARN 應用程式 YARN 節點標籤 -ynm,--yarnname 自定義yarn應用名稱 -yq,--yarnquery 顯示yarn的可用資源 -yqu,--yarnqueue 指定yarn佇列 -ys,--yarnslots 指定每個taskmanager的slots數 -yt,--yarnship 在指定目錄中傳輸檔案 -ytm,--yarntaskManagerMemory 每個taskmanager的記憶體 -yz,--yarnzookeeperNamespace 用來建立ha的zk子路徑的名稱空間 -z,--zookeeperNamespace 用來建立ha的zk子路徑的名稱空間
來自 “ ITPUB部落格 ” ,連結:http://blog.itpub.net/70024433/viewspace-2986669/,如需轉載,請註明出處,否則將追究法律責任。
相關文章
- flink1.10版local模式提交job流程分析模式
- Flink Yarn的2種任務提交方式Yarn
- 巧妙設定job的interval
- spark-submit 提交的引數SparkMIT
- vb.net 介面POST方式傳引數提交返回值
- tomcat vm 引數設定Tomcat
- 解決ajax get post方式提交中文引數亂碼問題
- Flink常用的配置引數總結
- Flink Checkpoint 引數詳解
- 2.7.11 檢視引數設定的方法
- curl CURLOPT_WRITEFUNCTION 的引數設定Function
- pandas引數設定小技巧
- Metasploit設定VERBOSE引數技巧
- Metasploit設定HttpTrace引數技巧HTTP
- Metasploit設定LHOST引數技巧
- JVM引數設定大氣JVM
- JVM常見引數設定JVM
- MySQL的配置檔案的引數設定MySql
- 前端提交過來的引數轉碼前端
- 頁面提交引數多而非form表單提交時應該怎麼處理引數進行提交ORM
- 19c exadata不能設定的引數
- 2.6.10 設定許可證引數
- [20200220]windows設定keepalive引數.txtWindows
- yarn-per-job提交流程Yarn
- 前端ajax非同步傳值以及後端接收引數的幾種方式前端非同步後端
- shell中定義變數用雙引號和單引號以及不用引號的區別變數
- 引數的定義和引數的傳遞
- 【Oracle】簡單引數也有講究,JOB_QUEUE_PROCESS引數調研Oracle
- JVM引數以及用法JVM
- 聊聊flink JobManager的heap大小設定
- webapi 設定swagger上請求引數的預設值WebAPISwagger
- Flink 原始碼解析--Stream、Job、ExecutionGraph的生成示例原始碼
- Java設定JSON字串引數編碼JavaJSON字串
- Nginx伺服器常用引數設定Nginx伺服器
- Azure Blob (三)引數設定說明
- basler工業相機引數設定
- 關於Quartz的Job 不能被注入以及SpringAop對Job失效quartzSpring
- java 執行緒池的初始化引數解釋和引數設定Java執行緒