Cómo comprobar la versión de Hadoop
La versión de hadoop se puede ver ejecutando: comando hadoop version ?
Para ver el número del clúster de hadoop:
Ejecutar: cd $HADOOP_HOME/lib/native
archivo ?libhadoop.so.1.0.0
Hadoop es un marco de software capaz de procesar de forma distribuida grandes cantidades de datos. Hadoop realiza el procesamiento de datos de manera confiable, eficiente y escalable.
Además de Apache hadoop, cloudera, hortonworks, mapR, DKhadoop, etc. también ofrecen sus propias versiones comerciales.
Las distribuciones comerciales brindan principalmente soporte técnico más profesional, lo cual es más importante para las grandes empresas. Las diferentes distribuciones tienen sus propias características.
Información ampliada:
Comparar opciones de versiones: distribución DKhadoop, distribución cloudera, distribución hortonworks.
1. Distribución DKhadoop: integra eficazmente todos los componentes de todo el ecosistema HADOOP, realiza una optimización en profundidad y lo recompila en una plataforma informática de big data completa de uso general con mayor rendimiento, logrando la implementación de Coordinación orgánica de cada componente.
Por lo tanto, en comparación con las plataformas de big data de código abierto, DKH tiene una mejora de rendimiento hasta 5 veces (máximo) en el rendimiento informático. Dkhadoop simplifica la compleja configuración del clúster de big data en tres tipos de nodos (nodo maestro, nodo de gestión y nodo informático), lo que simplifica enormemente la gestión y operación del clúster y mejora la alta disponibilidad, alta mantenibilidad y alta estabilidad del clúster.
2. Distribución de Cloudera: CDH es la distribución de hadoop de Cloudera, que es completamente de código abierto y tiene compatibilidad, seguridad y estabilidad mejoradas que Apache hadoop.
3. Distribución de Hortonworks: El producto principal de Hortonworks es Hortonworks Data Platform (HDP), que también es un producto 100% de código abierto.
Características de su versión: HDP incluye todos los componentes clave de la versión estable de Apache Hadoop; fácil de instalar, HDP incluye una herramienta de instalación y configuración de interfaz de usuario moderna e intuitiva.