spark on k8s提交任务脚本示例

网友投稿 472 2022-09-12

spark on k8s提交任务脚本示例

bin/spark-submit \ --master k8s://\ --deploy-mode cluster \ --name spark-pi \ --class org.apache.spark.examples.SparkPi \ --conf spark.executor.instances=3 \ --conf spark.kubernetes.authenticate.driver.serviceAccountName=spark \ --conf spark.kubernetes.container.image=192.168.xxx.28:1603/lego/spark/spark/spark:3.1.1 \ local:///opt/spark/examples/jars/spark-examples_2.12-3.1.1.jar

版权声明:本文内容由网络用户投稿,版权归原作者所有,本站不拥有其著作权,亦不承担相应法律责任。如果您发现本站中有涉嫌抄袭或描述失实的内容,请联系我们jiasou666@gmail.com 处理,核实后本网站将在24小时内删除侵权内容。

上一篇:k8s设置标签禁止istio边车sidebar注入
下一篇:首钢再胜四川,范子铭“18+10”末节定乾坤!
相关文章

 发表评论

暂时没有评论,来抢沙发吧~