有没有办法提供参数或设置来选择我希望运行 Spark_submit 作业的队列?
通过使用--queue
因此,火花提交作业的一个示例是:-
Spark-submit --master YARN --conf Spark.executor.memory=48G --conf Spark.driver.memory=6G --packages [用, 分隔的包] --queue [queue_name] --class [class_name] [jar_file ] [参数]
本文内容由网友自发贡献,版权归原作者所有,本站不承担相应法律责任。如您发现有涉嫌抄袭侵权的内容,请联系:hwhale#tublm.com(使用前将#替换为@)