任务提交SparkSubmit源码解析 Spark

任务提交SparkSubmit源码解析

检查SPARK_HOME执行环境 执行load-spark-env.sh文件,加载一些默认的环境变量(包括加载spark-env.sh文件) 检查JAVA_HOME执行环境 寻找Spark相关的jar包 执行org.apache.spark.launcher.Main解析参数,构建CMD命令 CMD命令判断 执行org.apache.spark.deploy.SparkSubmit这个类。
阅读全文
本文目录
    Loading...