Flink提交Job的方式以及引數設定
引數介紹
./bin/flink run -t yarn-session \ -Dyarn.application.id=application_XXXX_YY \ ./examples/streaming/TopSpeedWindowing.jar ./bin/flink run -t yarn-per-job --detached ./examples/streaming/TopSpeedWindowing.jar ./bin/flink run-application -t yarn-application ./examples/streaming/TopSpeedWindowing.jar yn(實際) = Math.ceil(p/ys) ys(總共) = yn(實際) * ys(指定) ys(使用) = p(指定) flink run -c,--class Flink應用程式的入口 -C,--classpath 指定所有節點都可以訪問到的url,可用於多個應用程式都需要的工具類載入 -d,--detached 是否使用分離模式,就是提交任務,cli是否退出,加了-d引數,cli會退出 -n,--allowNonRestoredState 允許跳過無法還原的savepoint。比如刪除了程式碼中的部分operator -p,--parallelism 執行並行度 -s,--fromSavepoint 從savepoint恢復任務 -sae,--shutdownOnAttachedExit 以attached模式提交,客戶端退出的時候關閉叢集 flink yarn-cluster 模式 -d,--detached 是否使用分離模式 -m,--jobmanager 指定提交的jobmanager -yat,--yarnapplicationType 設定yarn應用的型別 -yD 使用給定屬性的值 -yd,--yarndetached 使用yarn分離模式 -yh,--yarnhelp yarn session的幫助 -yid,--yarnapplicationId 掛到正在執行的yarnsession上 -yj,--yarnjar Flink jar檔案的路徑 -yjm,--yarnjobManagerMemory jobmanager的記憶體(單位M) -ynl,--yarnnodeLabel 指定 YARN 應用程式 YARN 節點標籤 -ynm,--yarnname 自定義yarn應用名稱 -yq,--yarnquery 顯示yarn的可用資源 -yqu,--yarnqueue 指定yarn佇列 -ys,--yarnslots 指定每個taskmanager的slots數 -yt,--yarnship 在指定目錄中傳輸檔案 -ytm,--yarntaskManagerMemory 每個taskmanager的記憶體 -yz,--yarnzookeeperNamespace 用來建立ha的zk子路徑的名稱空間 -z,--zookeeperNamespace 用來建立ha的zk子路徑的名稱空間
來自 “ ITPUB部落格 ” ,連結:http://blog.itpub.net/70024433/viewspace-2986669/,如需轉載,請註明出處,否則將追究法律責任。
相關文章
- ORACLE JOB INTERVAL引數設定Oracle
- Oracle sqlplus引數autocommit(自動提交)的設定OracleSQLMIT
- 手工指定CHANNEL與設定PARALLELISM引數的異同以及FILESPERSET引數的作用Parallel
- Flink Yarn的2種任務提交方式Yarn
- flink1.10版local模式提交job流程分析模式
- 【web】Spring RestTemplate提交時設定POST請求引數WebSpringREST
- job_queue_processes引數 job關係
- 巧妙設定job的interval
- vb.net 介面POST方式傳引數提交返回值
- spark-submit 提交的引數SparkMIT
- python中定義引數的四種方式Python
- job提交的原始碼分析原始碼
- Oracle CSS的引數設定 心跳時間設定OracleCSS
- vsftpd設定引數FTP
- RAC 特定引數設定
- 兩個引數設定
- 解決ajax get post方式提交中文引數亂碼問題
- C# HttpWebRequest 方式提交資料,引數為普通鍵值對C#HTTPWeb
- Flink常用的配置引數總結
- Flink Checkpoint 引數詳解
- curl CURLOPT_WRITEFUNCTION 的引數設定Function
- Metasploit設定LHOST引數技巧
- Metasploit設定VERBOSE引數技巧
- pandas引數設定小技巧
- Metasploit設定HttpTrace引數技巧HTTP
- tomcat vm 引數設定Tomcat
- JVM常見引數設定JVM
- JVM引數設定大氣JVM
- SAP系統引數設定
- SAP 系統引數設定
- chrome啟動引數設定Chrome
- 設定NLS_LANG引數
- spark job執行引數優化Spark優化
- 函式定義、函式的引數、函式的預設引數函式
- MySQL的配置檔案的引數設定MySql
- 前端提交過來的引數轉碼前端
- Swift語言中為外部引數設定預設值可變引數常量引數變數引數輸入輸出引數Swift變數
- 頁面提交引數多而非form表單提交時應該怎麼處理引數進行提交ORM