Descripción de la vacante
Capitole
Spain, Cequelinos
Data Engineer (Databricks) en Cequelinos, España is listed on Jobeax. Browse 80,000+ vacancies available.
Buscamos un/a Data Engineer Senior para diseñar y operar la plataforma de datos que alimenta un sistema de pricing dinámico e inteligencia de negocio en entornos retail de alto volumen. La persona seleccionada será el referente técnico de la arquitectura de datos: desde la ingesta de fuentes operacionales (ERP, POS, e-commerce, footfall) hasta la exposición de datos listos para consumo por modelos de ML y herramientas de BI.
El rol requiere dominio profundo de Databricks como plataforma central y sólido conocimiento de la arquitectura Medallion (Bronze / Silver / Gold), así como experiencia en modelado de datos dimensional y capacidad para trabajar con Azure Data Factory como orquestador de pipelines.
Responsabilidades principales
● Diseño y evolución de la arquitectura Medallion (Bronze → Silver → Gold) sobre Databricks / Delta Lake.
● Definición de estándares de ingesta, particionado, compactación y versionado de tablas Delta.
● Gobierno de la plataforma: Unity Catalog, gestión de permisos, linaje de datos y calidad (Great Expectations o similar).
● Evaluación y decisión de patrones de procesamiento: batch, micro-batch (Structured Streaming) y near real-time según el caso de uso.
● Diseño de modelos dimensionales (esquemas estrella y copo de nieve) orientados a casos de uso de pricing, forecasting y personalización.
● Definición de tablas de hechos y dimensiones: transacciones POS, catálogo de productos, maestro de tiendas, calendario promocional.
● Colaboración con el equipo de ML para diseñar y mantener el feature store sobre la capa Gold.
● Documentación del modelo de datos en un catálogo semántico accesible para usuarios de negocio y analítica.
● Construcción de pipelines de ingesta desde fuentes heterogéneas: ERP (SAP u otros), POS, APIs de e-commerce, feeds de Retail Media, NPS.
● Uso de Azure Data Factory para orquestación de movimientos de datos entre sistemas origen y el lakehouse — con preferencia por mantener la lógica de transformación en Databricks (PySpark / SQL).
● Implementación de patrones de ingesta incremental (CDC, watermark, upsert con Delta Merge) para minimizar latencia y coste.
● Testing de pipelines: validaciones de schema, checks de completitud y pruebas de regresión sobre datos.
● Monitorización de jobs en Databricks Workflows: alertas, reintentos y gestión de dependencias.
● Optimización de costes de cómputo: sizing de clusters, uso de Photon, Auto Loader y optimizaciones de Delta (OPTIMIZE / ZORDER).
● Soporte a incidencias de datos en producción (on-call rotatorio con el equipo).
Colaboración
● Trabajo estrecho con Data Scientists para garantizar que el feature store cubra los requisitos de los modelos de pricing y recomendación.
● Acompañamiento a analistas de negocio en la definición de métricas y KPIs sobre la capa Gold.
● Participación en code reviews, definición de convenciones de nombrado y estándares de calidad del equipo.
Requisitos imprescindibles
● 5+ años de experiencia en ingeniería de datos en entornos productivos.
● Experiencia sólida con Databricks como plataforma principal; Delta Lake, Databricks Workflows, Unity Catalog.
● Diseño e implementación de capas Bronze / Silver / Gold, granularidad, particionado y SLA por capa.
● Dominio de modelado dimensional (Kimball); diseño de esquemas estrella y copo de nieve; claves surrogadas, SCDs y tablas de hechos.
● PySpark y SQL avanzado (window functions, CTEs, optimización de queries).
● Azure Data Factory: conocimiento funcional para orquestación y movimiento de datos
● Experiencia con patrones de ingesta incremental: CDC, watermark, Delta Merge / upsert.
● Familiaridad con control de versiones (Git) y prácticas de DataOps básicas.
Valorables
● Experiencia en retail, travel retail o sectores con datos transaccionales de alto volumen.
● Conocimiento de herramientas de calidad de datos: Great Expectations, Soda o similar.
● Experiencia con dbt (data build tool) para transformaciones SQL sobre la capa Silver/Gold.
● Familiaridad con eventos en streaming: Kafka, Event Hubs o Databricks Structured Streaming.
● Conocimiento de herramientas de catálogo y linaje: Purview, Alation o Unity Catalog avanzado.
● Experiencia colaborando con equipos de ML en el diseño de feature stores (Feast, Tecton o solución custom).
Vacantes similares
€562.5 EUR
... proyecto concreto. Buscamos un compañero de viaje que quiera crecer con nosotros y sumar al largo plazo en el equipo de Cívica. El rol a incorporar es el de Data Engineer con foco en Databricks y en funciones como: - Diseñar, desarrollar y mantener pipelines de datos en Databricks bajo arquitectura Medallion (Bronze/Silver/Gold). ...
Spain, Málaga
€70,000 - €80,000 a year
About the role At DATAPAO, data ignites passion, community fuels collaboration, and growth knows no bounds. We are a leading Data Engineering and AI consulting company backed by Databricks and recognized for our unmatched delivery standards and rapid growth. We have been named Databricks EMEA Emerging Business Partner of ...
Spain, Barcelona
Hybrid
... experience in Data Engineering area · 3 years of experience in Databricks , including services like data pipelines, Unity Catalog · 3 years of experience in Big Data · You are proficient in SQL, Python and pySpark · You have a background in data warehousing, ETL, distributed data processing, software engineering components ...
Spain
Capgemini
... a more sustainable and inclusive world. We have a Data & AI team that will be delighted to have you on board. Would you like to join us? We are looking for a Databricks Data Engineer to join a data team and participate in the design, development, and optimization of data processing and analysis solutions. The selected candidate ...
Spain, Madrid
Michael Page España
About the role We are looking for a Data Platform Engineer (Databricks and Power BI) fluent in English - Data Platform Engineer - (Databricks and Power BI) - Michael Page SSC What you'll do Purpose of the Role: The Data Platform Developer's key responsibilities are to design and implement technical data solutions based ...
Spain, Barcelona
About the role We are looking for a Data Engineer with essential experience in Databricks and knowledge of AWS and Terraform , capable of participating in the evolution of secure, scalable, and governed data platforms in cloud environments. What you'll do - Administration and evolution of Databricks platforms for data processing, ...
Spain, Madrid
Nationale-Nederlanden
... organization. Responsibilities - Manage and innovate the Databricks Unity Catalog and Collibra Data platforms used across the company within the focus area of Data Governance. - Facilitate the use of these platforms, providing support and maintaining communication with data engineers and other technical stakeholders, enabling ...
Spain, Madrid
En Mimacom te ofrecemos la oportunidad de unirte como Senior Data Engineer para diseñar y optimizar plataformas de datos modernas en entornos cloud. Colaborarás con Data Scientists, analistas y áreas de negocio para entregar soluciones de datos fiables y escalables. Se valorará experiencia en Databricks, Python, PySpark ...
Spain, Albacete
... envision you? - You hold a degree or Master's in Computer Engineering, Data Engineering, Data Science, or a related field. - You have 2-5 years of experience as a data engineer in cloud environments working with large volumes of data processing. - You have developed data solutions using the Databricks platform (certifications ...
Spain, Zaragosa
Explore Group
Role: Data Platform Engineer (Databricks & dbt) Engagement: Contract / B2B Location: Fully Remote An experienced Data Platform professional is required to join an enterprise data initiative, focusing on the optimisation, governance, and administration of a modern Databricks environment. Key Responsibilities - Optimise and ...
Spain
Explore Group
Role: Data Platform Engineer (Databricks & dbt) Engagement: Contract / B2B Location: Fully Remote An experienced Data Platform professional is required to join an enterprise data initiative, focusing on the optimisation, governance, and administration of a modern Databricks environment. Key Responsibilities - Optimise and ...
Spain, Vitoria
European Dynamics
... and Integration team in architecting and implementing scalable enterprise data platform solutions utilizing Azure Databricks, Delta Lake, Unity Catalog, Azure Data Lake Storage Gen2, Azure Data Factory, Azure Event Hub, Azure SQL, and related Azure services; - Design and develop enterprise data engineering frameworks supporting ...
Spain, Valencia
Explore Group
Role: Data Platform Engineer (Databricks & dbt) Engagement: Contract / B2B Location: Fully Remote An experienced Data Platform professional is required to join an enterprise data initiative, focusing on the optimisation, governance, and administration of a modern Databricks environment. Key Responsibilities Optimise and ...
Spain, Pincia
Ayesa Digital
11k
... ingeniería del dato. - Experiencia mínima de 2 años trabajando con Databricks en entornos productivos. Imprescindible - Certificación oficial Databricks Certified Data Engineer Professional . Conocimientos técnicos - Apache Spark y PySpark. - Databricks Data Intelligence Platform. - Delta Lake y Delta Tables. - Databricks SQL. ...
Spain, España
Full-time hours
... solution-oriented Azure Data Platform Engineer to develop, operate, and optimize our modern Azure-based data platform. In this role, you will focus on Azure, Databricks, data infrastructure, and CI/CD , supporting multi-tenant environments and enabling reliable, scalable data solutions. Main responsibilities • Develop a ...
Spain
abde business consulting
€72k EUR - €82k EUR
... to communicate complex technical topics clearly to international stakeholders. - Fluent written and spoken English at C1/C2 level . Desirable Qualifications - Databricks Certified Data Engineer Professional. - Microsoft Certified: Azure Solutions Architect Expert. - Databricks Machine Learning certification. - Terraform ...
Spain, Madrid
abde business consulting
€72k EUR - €82k EUR
... to communicate complex technical topics clearly to international stakeholders. - Fluent written and spoken English at C1/C2 level . Desirable Qualifications - Databricks Certified Data Engineer Professional. - Microsoft Certified: Azure Solutions Architect Expert. - Databricks Machine Learning certification. - Terraform ...
Spain, Barcelona
35k - 45k
... multiple awards, we help major organizations transform their business with Azure, Microsoft Fabric, Databricks and AI technologies. Your Role We are looking for a Data Engineer to join our team and work on cutting-edge, enterprise-scale Data projects with solid expertise in Microsoft Fabric and Azure Data Platform, a proven ...
Spain, Valencia
Hybrid
... Experience in data engineering, software engineering, business intelligence or a related technical role - Practical experience with Python and PySpark-based data pipelines, plus good knowledge of SQL and data modelling - Hands-on experience with Databricks or a comparable modern data platform - Experience building dashboards ...
Spain