Responsabilidades básicas de los ingenieros de desarrollo de big data: responsabilidades laborales
Responsabilidades básicas de los ingenieros de desarrollo de Big Data: responsabilidades laborales
En muchas situaciones en el estudio, el trabajo y la vida, entraremos en contacto con las responsabilidades laborales. Aclarar las responsabilidades laborales puede permitir a los empleados. conocer y dominar las responsabilidades laborales, ser capaz de maximizar la gestión laboral, asignar científicamente la mano de obra y garantizar que las personas hagan el mejor uso de sus talentos y las asigne a los puestos. ¿Cómo debemos formular las responsabilidades laborales? Las siguientes son las responsabilidades básicas y las responsabilidades laborales de los ingenieros de desarrollo de big data que he recopilado para usted. Son solo como referencia.
Responsabilidades básicas del ingeniero de desarrollo de Big Data - Responsabilidades laborales 1
Responsabilidades:
1. Participar en la construcción de la plataforma de big data y la arquitectura técnica del proyecto.
2. Análisis de datos, minería y producción de modelos específicos
3. Analizar, escribir y formular soluciones relacionadas con big data de acuerdo con las necesidades del producto
Requisitos del puesto; :
1. Licenciatura o superior en especialidades relacionadas con la informática, base sólida en programación y más de 2 años de experiencia en desarrollo de big data
2. Familiarizado con la ecología y la arquitectura del sistema de Hadoop , familiarizado con Flink y Spark, Hive y otras herramientas comunes de código abierto
3. Familiarizado con Flume, kakfa, scribe y otros sistemas de recopilación de registros
4. Familiarizado con 1 de los principales bases de datos (Oracle, postgresql, Mysql, Sql Server) y superiores, tienen buena experiencia en ajuste del rendimiento de SQL
5. Se prefieren candidatos con experiencia en ETL en almacén de datos
6. Tienen comportamiento de usuario recopilación de registros, procesamiento masivo de datos, construcción de datos. Se dará prioridad a los solicitantes con experiencia en modelado
7. Tener la capacidad de continuar aprendiendo como software de código abierto y estar dispuesto a compartir conocimientos; Puede soportar de forma independiente una mayor presión laboral. Responsabilidades básicas de un ingeniero de desarrollo de big data - responsabilidades laborales 2
Responsabilidades:
1. Análisis estadístico de datos en el campo de la moneda digital, responsable de el diseño, la gestión y las operaciones de inversión reales de estrategias de inversión cuantitativa en moneda digital
2. Cooperación con Conéctese con comerciantes, formule planes prácticos de prueba de estrategias y desarrolle y verifique nuevos modelos estratégicos
3 Ayudar a los comerciantes en el comercio y la gestión de riesgos, y realizar análisis de desempeño cuantitativo de los resultados comerciales reales, promover la automatización de transacciones
4. Otras tareas asignadas por los superiores
Requisitos del trabajo:
1. Graduado de matemáticas/informática/finanzas, con algoritmos sólidos y bases teóricas de aprendizaje automático
2. Aquellos con experiencia comercial cuantitativa en tiempo real, rica experiencia en modelado matemático y sólidas capacidades de procesamiento de datos son preferidos
3. Precios en los mercados financieros Tener una comprensión única de las fluctuaciones y análisis cuantitativos en profundidad, y tener cierta experiencia en la investigación de estrategias de cobertura
4. de moneda digital y orientado a resultados;
5. Tener rastreo web y se prefieren los solicitantes con experiencia en la redacción de programas de rastreo. Responsabilidades básicas del ingeniero de desarrollo de Big Data - Responsabilidades laborales 3
Responsabilidades:
1 Diseño, selección y desarrollo de un sistema de análisis de registros de big data
2. Cooperar con cada empresa para brindar soporte de datos, resumir y optimizar datos operativos y de productos
3. Procesar datos masivos de usuarios, extraer, analizar, resumir los atributos, el comportamiento y otra información del usuario, y completar los resultados del análisis;
4. Descubrir y señalar anomalías en los datos y analizar la racionalidad de los datos.
5. Operación y mantenimiento de la plataforma de infraestructura de big data de la empresa para garantizar la estabilidad y disponibilidad de los datos; servicios de plataforma;
6. Monitoreo, gestión de recursos y gestión del flujo de datos de la plataforma de infraestructura de big data;
7. Solución de expansión elástica de plataforma en la nube basada en análisis de datos.
Requisitos laborales:
1. Experiencia práctica en sistemas de datos de análisis de registros.
2. Más de 3 años de experiencia en investigación y desarrollo en la industria de Internet; experiencia en el uso de Hadoop/hive/spark Capacidad para analizar datos masivos
3. Dominar la instalación y depuración de Hadoop, Flume, Kafka, Zookeeper, HBase y Spark
4; Familiarizado con sistemas de bases de datos relacionados con big data, Bases de datos relacionales y NoSQL.
5. Dominar la configuración, gestión y optimización del sistema operativo Linux y ser capaz de investigar y resolver de forma independiente diversos problemas en la capa del sistema operativo.
6. Tener buena comunicación; Habilidades y excelente planificación, ejecución, fuerte sentido de responsabilidad y excelente capacidad de aprendizaje. Responsabilidades básicas del ingeniero de desarrollo de Big Data - Responsabilidades laborales 4
Responsabilidades:
1. Responsable del desarrollo de los procedimientos de análisis, procesamiento, limpieza y procesamiento de datos
<; p> 2, Responsable de la construcción, mantenimiento y optimización de plataformas relacionadas con datos;3. Responsable del desarrollo de marcos informáticos basados en plataformas informáticas distribuidas como Hadoop/Spark/Hive/kafka para lograr análisis fuera de línea y análisis en tiempo real;
Requisitos laborales:
1. Una licenciatura debe ser de una institución 211 o superior, una maestría o superior no se limita a ninguna institución. , software informático y carreras relacionadas
2 Familiarizado con el lenguaje Java y Scala, familiarizado con los patrones de diseño comunes y conocimiento de la refactorización de código
3. Competente en el uso de hadoop, hbase, Kafka, Hive, Spark y Presto, y estar familiarizado con el marco subyacente y los principios de implementación
4. Utilice Spark Streaming y Spark SQL para el procesamiento de datos y tenga experiencia en la optimización de SPARK SQL
;5. Se requieren al menos 2 años de experiencia en desarrollo y se prefiere experiencia en desarrollo de flink.
6. Gran capacidad de aprendizaje, le gusta estudiar nuevas tecnologías, tiene un concepto de equipo y tiene la capacidad. Capacidad para resolver problemas de forma independiente. Responsabilidades básicas de los ingenieros de desarrollo de big data - Responsabilidades laborales 5
Responsabilidades:
1. Responsable de la construcción del entorno básico y optimización del rendimiento de la plataforma de big data, completando la construcción y el mantenimiento de plataforma y transmisión en tiempo real Arquitectura e I + D de plataformas informáticas, programación distribuida, informes visuales y otras plataformas
2. Realizar análisis de código en profundidad y optimización de varios marcos de código abierto
3. Participar en la revisión del plan técnico de big data
4. Orientar el trabajo de los ingenieros de big data junior e intermedio
Requisitos del trabajo:
2. Tener un conocimiento profundo de los componentes relacionados con big data: Hadoop, Spark, Hbase, Hive, Flink, Kafka, Flume y otras arquitecturas e implementaciones subyacentes, y tener las capacidades de personalización e investigación y desarrollo correspondientes, especialmente dominio del marco Flink <; /p>
3 . Tener la capacidad de construir una plataforma básica estable de big data y tener experiencia en investigación y desarrollo de sistemas, como recopilación de datos, limpieza de datos, construcción de almacenes de datos y computación de flujo en tiempo real.
4. Se prefieren aquellos que sean apasionados por la tecnología, tengan buen pensamiento y sensibilidad a los datos, tengan ciertas capacidades de análisis de datos y tengan cierta comprensión del aprendizaje profundo y el aprendizaje automático.
5. Trabajo planificado, con fuerte sentido de responsabilidad y capacidad de ejecución, alto sentido de responsabilidad, estilo de trabajo honesto, excelentes habilidades de comunicación y espíritu de equipo. ;