搭建spark集群

配置好文件

根据docker-compose.yml里面的文件路径配好文件

docker load --input spark.tar
docker-compose up -d
docker ps
docker exec -it spark-master bash
jps

新开一个窗口

进入文件夹里面再py
pyspark --master spark://spark-master:7077

注意文件夹路径！！！！