Gamdom
Rhenus Logistics
Ingeniero/a de Datos Senior
SQL
Traducción automática. Consulta el original.
Qué puedes esperar
Sobre el puesto
Buscamos un/a Ingeniero/a de Plataforma de Datos con experiencia y orientación a soluciones, basado en Azure, para desarrollar, operar y optimizar nuestra moderna plataforma de datos basada en Azure. En este puesto, te centrarás en Azure, Databricks, infraestructura de datos y CI/CD, dando soporte a entornos multi-inquilino y permitiendo soluciones de datos fiables y escalables.
Responsabilidades principales
- Desarrollar una Plataforma de Datos moderna en Azure: Diseñar, construir y operar soluciones de datos de extremo a extremo utilizando Azure Data Factory, Azure Data Lake Storage Gen2, Databricks y Azure Synapse Analytics.
- Crear Pipelines de Datos: Desarrollar y mantener pipelines ETL/ELT escalables utilizando PySpark y Spark, con un fuerte enfoque en la calidad, fiabilidad y rendimiento de los datos.
- Soporte Multi-inquilino y de Entornos: Dar soporte y operar plataformas de datos multi-inquilino en múltiples entornos (desarrollo, pruebas, producción) con una clara separación y gobernanza.
- Operaciones de Infraestructura y Plataforma: Provisionar, configurar y mantener la infraestructura de datos de Azure, asegurando estabilidad, seguridad y escalabilidad.
- CI/CD para Plataformas de Datos: Construir y mantener pipelines de CI/CD para pipelines de datos y cargas de trabajo de Databricks, permitiendo despliegues automatizados entre entornos.
- Uso de Azure Eficiente en Costes y Buenas Prácticas: Aplicar las mejores prácticas de Azure para optimizar el rendimiento y los costes, incluyendo el dimensionamiento de recursos, la gestión del ciclo de vida y la monitorización de costes.
- Colaboración con Equipos de BI y Datos: Trabajar estrechamente con los equipos de BI y datos para dar soporte a modelos de datos eficientes y soluciones de reporting.
- Gobernanza de Datos y Fundamentos de Seguridad: Dar soporte a los requisitos de gobernanza de datos como control de acceso, manejo seguro de datos y gestión básica de metadatos.
Qué aportas
- Experiencia en Plataformas de Datos de Azure: Varios años de experiencia práctica con Azure Data Factory, ADLS Gen2, Databricks y Azure Synapse Analytics.
- PySpark y Spark: Sólida experiencia en la construcción de pipelines de procesamiento de datos distribuidos utilizando PySpark y Spark.
- Conocimientos de ETL / ELT: Sólida comprensión de los conceptos ETL/ELT y prácticas de modelado de datos.
- CI/CD y Automatización: Experiencia con pipelines de CI/CD para cargas de trabajo de datos y automatización básica de despliegues.
- Habilidades de SQL: Sólidas habilidades de SQL y experiencia optimizando consultas analíticas.
- Formatos de Datos: Experiencia práctica con Parquet y/o Avro.
- Conciencia de Infraestructura: Buen entendimiento de la estructura de recursos de Azure, entornos y mejores prácticas operativas.
- Mentalidad Analítica y Orientada al Equipo: Enfoque centrado en soluciones con la capacidad de trabajar de forma independiente y colaborativa.
- Habilidades Lingüísticas: Se requiere fluidez en inglés; el conocimiento de alemán es una ventaja.
Nota: Este es un puesto remoto en la Unión Europea. Los candidatos deben residir en un país donde Rhenus Overland Transport ya esté establecida.
