Entorno de desarrollo de código fuente Spark

El código de muestra hace referencia a SparkSQL de AMPCamp2015 y el entorno de desarrollo utiliza idea. Primero, necesitas empaquetar tu programa en un frasco.

Seleccione Estructura del proyecto -> Artefactos Debido a que el clúster ya tiene los paquetes jar de los que depende, puede excluir estos paquetes jar al empaquetar para reducir el tamaño de los paquetes jar empaquetados.