Data Engineer – ADA/PySpark - BBVA en Madrid, España

Data Engineer – AWS / PySpark

En Alvea Soluciones Tecnológicas buscamos un/a Data Engineer con experiencia en AWS y procesos de ingesta de datos para incorporarse a un proyecto de larga duración, trabajando con procesos de planificación, ejecución y seguimiento de cargas de datos.

Funciones
-Planificación y seguimiento de procesos batch mediante Control-M.
-Implementación y gestión de ingestas de datos mediante Kirby y Hammurabi.
-Gestión de transmisiones de datos mediante DataX.
-Revisión de logs, análisis de incidencias y seguimiento de mallas de ejecución en Control-M.
-Desarrollo y mantenimiento de procesos de tratamiento y transformación de datos con PySpark y SQL.
-Trabajo con servicios del ecosistema ADA AWS, incluyendo S3, Athena y SageMaker.
-Seguimiento de los procesos de carga, ejecución y disponibilidad de los datos.
-Resolución de incidencias y colaboración con los equipos técnicos para garantizar el correcto funcionamiento de los procesos de datos.

Requisitos imprescindibles
-Experiencia en el ecosistema ADA AWS.
-Conocimientos de PySpark y SQL.
-Experiencia trabajando con Amazon S3 y Athena.
-Experiencia en procesos de ingesta y transmisión de datos.
-Conocimientos de Control-M para la planificación y seguimiento de procesos batch.
-Experiencia en revisión de logs y seguimiento de mallas de ejecución.
-Conocimientos de Kirby, Hammurabi y DataX.

Se valorará
-Experiencia con SageMaker.
-Experiencia en automatización y optimización de procesos de datos.
-Capacidad de análisis y resolución de incidencias en entornos de producción.

Condiciones
-Contrato indefinido.
-Proyecto de larga duración.
-Modalidad remoto 100%

Si tienes experiencia en procesos de datos, AWS y planificación de cargas batch, ¡queremos conocerte!