Red de conocimiento informático - Conocimiento del nombre de dominio - Cómo enviar trabajos de Spark a YARN mediante código

Cómo enviar trabajos de Spark a YARN mediante código

¿Te refieres a enviar a través de la línea de comando en la terminal?

Ejemplo:

$spark-submit --class SparkPi --master Yarn-cluster --executor-memory 2G --num-executors 2 ./SparkTest.jar

Nota: Hay un espacio antes de "--", y el último es la ruta donde se encuentra el paquete jar. Si el programa tiene parámetros, se enumerarán uno por uno al final.

Imágenes adjuntas

El () en la imagen se agrega antes de que la línea de comando requiera un retorno de carro

¿Referencia? /kinger0/article/details/46562473