今天继续spark的学习,今天完成了Standalone 模式的配置和在windows上的运行
首先是Standalone 模式
更改spark目录下conf文件中的salves文件,添加内容
更改spark目录下conf文件中的spark-env文件,添加内容
export JAVA_HOME=/opt/module/jdk1.8.0_144 SPARK_MASTER_HOST=hadoop102 SPARK_MASTER_PORT=8020 启动spark sbin/start - all.sh
查看是否启动
测试
windows环境下spark运行
解压spark,在bin目录下下启动
测试