docker下的spark使用
在網站
https://hub.docker.com/r/mesosphere/spark/tags/
下可以檢視spark的映象
1,拉取映象
sudo docker pull mesosphere/spark:2.4.0-2.2.1-3-hadoop-2.6
2,執行映象
sudo docker run --name spark2 --hostname spark2 -it mesosphere/spark:2.4.0-2.2.1-3-hadoop-2.6 bash
配置環境變數
root@spark2:/opt/spark/dist# export PATH=$JAVA_HOME/bin:$PATH
root@spark2:/opt/spark/dist# export SPARK_HOME=/opt/spark/dist
root@spark2:/opt/spark/dist# export PATH=$SPARK_HOME/bin:$PATH
root@spark2:/opt/spark/dist# spark-shell
相關文章
- docker下的spark叢集,調整引數榨乾硬體DockerSpark
- docker下,極速搭建spark叢集(含hdfs叢集)DockerSpark
- CentOS8下的Docker使用CentOSDocker
- 利用docker搭建spark hadoop workbenchDockerSparkHadoop
- Linux下絲滑使用dockerLinuxDocker
- Linux 下的 Docker 安裝與使用 Docker-compose 安裝LinuxDocker
- Spark下載與入門(Spark自學二)Spark
- docker下的nginxDockerNginx
- Spark流教程 :使用 Apache Spark 的Twitter情緒分析SparkApache
- Docker 下開發 hyperf 完整使用示例Docker
- Linux下使用docker部署mysql(一)LinuxDockerMySql
- docker環境下的RabbitMQ部署,Spring AMQP使用DockerMQSpring
- Docker的使用Docker
- Docker中提交任務到Spark叢集DockerSpark
- Mac下使用Docker開啟KubernetesMacDocker
- 在Ubuntu下搭建Spark群集UbuntuSpark
- Linux 下使用 Docker 安裝lnmp環境LinuxDockerLNMP
- 在 Ubuntu 14.04 下使用 cgroups 和 DockerUbuntuDocker
- Spark-Streaming的學習使用Spark
- 【Spark篇】---SparkSQL on Hive的配置和使用SparkSQLHive
- Calcite 使用原生的RDD 處理SparkSpark
- docker命令(下)Docker
- Spark筆記:複雜RDD的API的理解(下)Spark筆記API
- Spark Sql 函式使用SparkSQL函式
- 使用Ganglia監控SparkSpark
- Spark 3.2使用體驗Spark
- 如何使用RubyMine中的Docker / Docker Compose?Docker
- 案例分享:基於Docker環境下的Jenkins搭建及使用DockerJenkins
- 【Docker】使用docker部署 mysqlDockerMySql
- docker的簡單使用Docker
- Docker compose的使用Docker
- Docker的使用筆記Docker筆記
- Docker的映象使用-WindowDocker
- Mac上Docker的使用MacDocker
- Docker中Mq的使用DockerMQ
- docker的使用方法Docker
- Docker下夢織CMS的部署Docker
- Learning Spark——使用Intellij Idea開發基於Maven的Spark程式SparkIntelliJIdeaMaven