¿Qué hace un experto en tecnología de big data?
Principalmente responsable del desarrollo de tecnología de big data, como la redacción de programas de procesamiento fuera de línea, recopilación de datos, ETL de datos, etc.
2. Ingeniero de operación y mantenimiento de big data
Responsable principal del mantenimiento de la plataforma de big data de la empresa, como la gestión y seguimiento de clusters de Hadoop, seguimiento del estado operativo, etc.
3. Arquitecto de big data
Principalmente responsable de las ideas de la plataforma de big data de la empresa, como la selección de tecnología, la instalación de tecnología, etc.
4. Analista de big data
Basado en su experiencia en la industria, es responsable del análisis de datos de cada unidad de negocio de la empresa, como análisis financiero, análisis de producción, análisis de ventas, etc. .
5. Ingeniero de algoritmos de big data
Principalmente responsable del desarrollo de algoritmos relacionados con el aprendizaje automático, como el desarrollo de algoritmos de sistemas de recomendación.
6. Ingeniero de desarrollo informático en tiempo real de big data
Principalmente responsable del desarrollo del sistema informático en tiempo real de la empresa, como el desarrollo del sistema de control de riesgos en tiempo real Flink, real. -Análisis y desarrollo de indicadores de tiempo basados en Spark Streaming, etc.
7. Ingeniero de minería de datos
Principalmente responsable de la minería de datos, extracción de características, selección y evaluación de modelos de minería basados en plataforma big data. Por ejemplo, el desarrollo de etiquetas de tipo minería de retratos de usuarios.
8. Ingeniero de desarrollo de BI
El trabajo principal es construir la plataforma de inteligencia empresarial de la empresa, incluida la producción de diversos informes de visualización de datos, y el ingeniero de desarrollo ETL para la producción de grandes informes. -Pantallas de control. Responsable de la minería de datos, limpieza de datos y preprocesamiento relacionado. Por ejemplo, elimine algunos datos ilegales de los datos de texto.