docker spark 一键部署
# 首先下载 docker 脚本
>git clone git@github.com:amplab/docker-scripts.git
切换路径到 docker-scripts
分别运行脚本加载 spark 相关镜像
>./apache-hadoop-hdfs-precise/build
>./dnsmasq-precise/build
>./spark-1.0.0|0.8.0|0.9.0|0.9.1/build #根据需要选择版本
以上执行成功后修改
脚本 deploy/start_spark_cluster.sh
接着就可以启动集群了,运行 sudo ./deploy/deploy.sh -i spark:1.0.0 -w 3
命令介绍查看 README.md 文件
运行状态截图:
评论1