¿Qué tipo de profesión es big data?
La especialización en recopilación y gestión de big data ayudará sistemáticamente a las empresas a dominar las soluciones a diversos problemas típicos en aplicaciones de big data desde tres niveles: gestión de datos, desarrollo de sistemas y análisis y minería de datos masivos.
La especialización en big data ayudará sistemáticamente a las empresas a dominar soluciones a diversos problemas típicos en aplicaciones de big data desde los tres aspectos principales de las aplicaciones de big data (es decir, gestión de datos, desarrollo de sistemas y análisis y minería de datos masivos). , incluida la implementación y análisis de algoritmos de filtrado colaborativo, el funcionamiento y aprendizaje de algoritmos de clasificación, etc.
La construcción y evaluación comparativa de clústeres distribuidos de Hadoop, la construcción y evaluación comparativa de clústeres distribuidos de Hbase, la implementación de algoritmos paralelos, el despliegue de Mapreduce y Hive y la implementación de operaciones de datos, etc., para mejorar de manera efectiva las soluciones prácticas de la capacidad de los problemas de las empresas.
Tecnología core
(1) Big data y ecosistema Hadoop. Introducción y análisis detallados de los principios y aplicaciones del sistema de archivos distribuido HDFS, el sistema de archivos en clúster ClusterFS y la tecnología de base de datos distribuida NoSQL Mapreduce, la base de datos distribuida HBase y el almacén de datos distribuido Hive.
(2) Tecnología de bases de datos relacionales. Introduzca en detalle los principios de las bases de datos relacionales y domine la construcción, gestión, desarrollo y aplicación de bases de datos típicas de nivel empresarial.
(3) Tratamiento distribuido de datos. Introducción y análisis detallados del modelo informático Map/Reduce y los principios y aplicaciones de la tecnología Hadoop Map/Reduce.
(4) Análisis masivo de datos y minería de datos. Introducción detallada a la tecnología de minería de datos, algoritmos de minería de datos: similitud Minhash, Jaccard y Cosine, algoritmo de minería de datos TF-IDF, algoritmo de agrupación, así como aplicaciones específicas de la tecnología de minería de datos en la industria.
(5) Internet de las Cosas y Big Data. Introducción detallada a las aplicaciones de big data en Internet de las cosas, interpretación automática de imágenes de teledetección y consulta, análisis y extracción de datos de series temporales.