Data Engineer & Generative IA en Madrid, España

¡Forma parte del futuro de Paradigma! Si eres Data Engineer y quieres participar en un proyecto de nuestro área de Data con experiencia en mantenimiento, optimización, integración, gestión del ciclo de vida y calidad del dato basado en cloud y aportas experiencia en proyectos de IAGenerativa construyendo RAG y Agentes, este proyecto te puede interesar.

¿Que buscamos?

Data Engineer con experiencia en construcción de pipelines, diseño, desarrollo y optimización de datos complejos basado en cloud AWS, Azure y/o GCP, asi como experiencia en proyectos de IA Generatiava

Responsabilidades

• Diseño e implementación de pipelines de datos : Crear y estructurar procesos para la ingestión, procesamiento y transformación de datos.
• Construcción de RAG y/o Agentes
• Recolección y almacenamiento de datos : Implementar soluciones para la captura y almacenamiento eficiente de datos provenientes de diversas fuentes.
• Limpieza y preprocesamiento de datos : Asegurar que los datos estén limpios y listos para su análisis, aplicando técnicas de limpieza y transformación.
• Optimización de bases de datos : Ajustar bases de datos para mejorar su rendimiento y escalabilidad.
• Integración de datos: Facilitar la correcta integración de datos provenientes de distintas fuentes.
• Mantenimiento de sistemas de datos: Asegurar el funcionamiento continuo y eficiente de los sistemas de datos.
• Monitorización y ajuste de flujos de datos: Supervisar y ajustar los pipelines y flujos de datos para mantener su rendimiento y confiabilidad.
• Calidad del dato: Implementar y mantener prácticas para asegurar la precisión, consistencia y fiabilidad de los datos.
• Gestión del ciclo de vida del dato : Gestionar el ciclo de vida de los datos desde su creación hasta su eventual archivado y eliminación.
• Orquestación de pipelines de datos : Implementar y gestionar herramientas de orquestación de flujos de trabajo como Apache Airflow, AWS Step Functions, o Google Cloud Composer para asegurar la automatización y eficiencia de los pipelines de datos.
• Ingesta de datos Batch y/o Streaming : Desarrollar e implementar procesos de ingestión de datos en lotes y en tiempo real utilizando herramientas como Apache Kafka, Change Data Capture (CDC), y AWS Kinesis.

Debes tener experiencia en:

• Proyectos con grandes volúmenes de datos como Data Engineer
• Construcción de RAG y/o Agentes
• Cloud -AWS
• Desarrollo Python

¿Por qué Paradigma?

Libertad con responsabilidad Confiamos en las personas para organizar su trabajo de forma flexible, favoreciendo el equilibrio entre la vida personal y profesional sin perder de vista los objetivos y el impacto de nuestro trabajo. Tendrás la posibilidad de trabajar en un modelo de trabajo remoto o híbrido. Una comunidad de referencia Formarás parte de una comunidad ágil y tecnológica activa, donde compartir conocimiento, aprender de otros expertos y contribuir al desarrollo de las mejores prácticas del sector. Acompañamiento desde el primer día Contarás con el apoyo de un Buddy que te ayudará en tu integración, resolverá tus dudas y facilitará que te sientas parte de Paradigma desde el inicio. Excelencia técnica como seña de identidad Nos apasiona la tecnología y apostamos por el desarrollo continuo de nuestras capacidades. El conocimiento, la calidad y la mejora constante forman parte de nuestra cultura. También apostamos por el aprendizaje continuo y tendrás acceso a un plan anual de formación, certificaciones oficiales y espacios de aprendizaje diseñados para impulsar tu desarrollo profesional. Beneficios Además de un entorno de trabajo cercano y colaborativo, ofrecemos seguro médico 100% subvencionado, retribución flexible a través de Edenred, 25 días de vacaciones anuales y otros beneficios orientados al bienestar de las personas. Conócenos mejor aquí: YouTube Paradigma Digital