Red de conocimiento informático - Material del sitio web - ¿Es factible construir hadoop en un dormitorio con tres computadoras portátiles?

¿Es factible construir hadoop en un dormitorio con tres computadoras portátiles?

Se recomienda utilizar sistemas duales en tres máquinas y asignar tanto espacio en el disco duro como sea posible, ya que procesar 1 GB de datos puede requerir 1,5 GB de espacio. Estas tres máquinas se pueden usar como estaciones maestras para encontrar un rendimiento más confiable y el resto se pueden usar como estaciones esclavas.

Para tutoriales específicos, consulte "Ejecución de Hadoop en Ubuntu Linux (clúster de un solo nodo)" y "Ejecución de Hadoop en Ubuntu Linux (clúster de múltiples nodos)". Seguir el tutorial paso a paso puede ser un proceso un poco tortuoso, pero sigue siendo un ejercicio y es realmente emocionante ver el ejemplo de WordCount ejecutándose por primera vez.

El código de nuestro proyecto se encuentra en shenchsh/data-cube-by-terasort-on-hadoop - GitHub.