Red de conocimiento informático - Material del sitio web - Cómo construir un clúster Spark

Cómo construir un clúster Spark

1.?

Introducción al entorno de instalación

Entorno de hardware: dos máquinas virtuales con CPU de cuatro núcleos, memoria 4G y disco duro 500G.

Entorno de software: ¿Ubuntu12.04 de 64 bits?

LTS; los nombres de host son spark1 y spark2, y las direcciones IP son 1**.1*.**.* ** /***. La versión JDK es 1.7. Hadoop2.2 se ha implementado correctamente en el clúster. Para conocer el proceso de implementación detallado, consulte otro documento, Instalación e implementación de Yarn.

2. ?Instalar Scala2.9.3