Data Engineer

Shou; Madrid; Híbrido; EUR 35.000 - 50.000; Jornada completa

Descripción de la vacante

Consultora en tecnología busca un Data Engineer con al menos 3 años de experiencia en desarrollo y 1 año en Big Data. El candidato se encargará del desarrollo y mantenimiento de procesos ETL, trabajando en un entorno híbrido con un enfoque en tecnologías como Spark y Google Cloud Platform.

Formación

• Mínimo 3 años de experiencia como desarrollador y 1 año en proyectos de Big Data.
• Familiarización con entornos cloud, especialmente Google Cloud Platform.
• Experiencia en programación funcional y procesos ETL.

Responsabilidades

• Desarrollo y mantenimiento de procesos de extracción, transformación y carga (ETL).
• Análisis y diseño de procesos ETL basados en requerimientos funcionales.
• Automatización de procesos y soporte a IT en despliegue y mantenimiento.

Conocimientos

Spark

YARN

Hadoop

Hive

MySQL

Programación funcional

Linux

Shell scripting

Google Cloud Platform

Agile

GitHub

JIRA/Redmine

Continuous Integration

Descripción del empleo

Importante consultora en tecnología busca un Data Engineer con mínimo 3 años de experiencia cómo desarrollador ymínimo 1 año de experiencia trabajando en proyectos de Big Data.

REQUISITOS TÉCNICOS
- Experiencia con las tecnologías Spark, YARN, Hadoop, Hive.
- Experiencia con bases de datos relacionales (MySQL).
- Lenguajes de programación.
- Programaciónfuncional.
- Experiencia con Linux y shell scripting.
- Familiarizado con entornos cloud, particularmente Google Cloud Platform (se valorarán conocimientos de AWS o Azure).
- Familiarizado con Agile, GitHub, JIRA/Redmine, ContinuousIntegration).

RESPONSABILIDADES:
Participará en el desarrollo y mantenimiento de procesos de extracción, transformación ycarga(ETL) sobre datos provenientes de las distintas áreas de negocio. Entre las tareas quedeberádesempeñar, se encuentran:
- Análisis y diseño de los procesos ETL en base a los requerimientos funcionales,
teniendoen cuenta también los no funcionales como el rendimiento o la escalabilidad.
- Desarrollo y pruebas unitarias.
- Participación en revisiones de código.
- Automatización de procesos y soporte a IT en el despliegue y mantenimiento.

Contrato a termino indefinido. Modalidad Hibrida.