docker下的spark使用
在網站
https://hub.docker.com/r/mesosphere/spark/tags/
下可以檢視spark的映象
1,拉取映象
sudo docker pull mesosphere/spark:2.4.0-2.2.1-3-hadoop-2.6
2,執行映象
sudo docker run --name spark2 --hostname spark2 -it mesosphere/spark:2.4.0-2.2.1-3-hadoop-2.6 bash
配置環境變數
root@spark2:/opt/spark/dist# export PATH=$JAVA_HOME/bin:$PATH
root@spark2:/opt/spark/dist# export SPARK_HOME=/opt/spark/dist
root@spark2:/opt/spark/dist# export PATH=$SPARK_HOME/bin:$PATH
root@spark2:/opt/spark/dist# spark-shell
相關文章
- docker下的spark叢集,調整引數榨乾硬體DockerSpark
- docker下,極速搭建spark叢集(含hdfs叢集)DockerSpark
- CentOS8下的Docker使用CentOSDocker
- Linux 下的 Docker 安裝與使用 Docker-compose 安裝LinuxDocker
- Linux下絲滑使用dockerLinuxDocker
- Spark流教程 :使用 Apache Spark 的Twitter情緒分析SparkApache
- Linux下使用docker部署mysql(一)LinuxDockerMySql
- Mac下使用Docker開啟KubernetesMacDocker
- docker下的nginxDockerNginx
- Docker 下開發 hyperf 完整使用示例Docker
- Spark-Streaming的學習使用Spark
- Docker的使用Docker
- Docker中提交任務到Spark叢集DockerSpark
- Linux 下使用 Docker 安裝lnmp環境LinuxDockerLNMP
- Calcite 使用原生的RDD 處理SparkSpark
- Docker compose的使用Docker
- 案例分享:基於Docker環境下的Jenkins搭建及使用DockerJenkins
- Spark 3.2使用體驗Spark
- 如何使用RubyMine中的Docker / Docker Compose?Docker
- spark structured-streaming 最全的使用總結SparkStruct
- docker命令(下)Docker
- docker的使用方法Docker
- docker的簡單使用Docker
- docker中command的使用Docker
- Docker中Mq的使用DockerMQ
- Mac上Docker的使用MacDocker
- Docker的使用筆記Docker筆記
- Docker的映象使用-WindowDocker
- pycharm下與spark的互動 詳細配置說明以及spark 執行簡單例子PyCharmSpark單例
- 【Docker】使用docker部署 mysqlDockerMySql
- Docker下夢織CMS的部署Docker
- 在Ubuntu中安裝Docker和docker的使用UbuntuDocker
- Spark視訊教程免費下載Spark
- docker使用Docker
- 【Docker】Windows將docker下載的映象存放到其他盤DockerWindows
- 使用python的docker-py實現docker的api操作PythonDockerAPI
- 使用docker和nginx搭建一個下載伺服器DockerNginx伺服器
- docker的基本使用方法Docker