Reino Unido
AKA
N Consulting Ltd
Ingeniero de Datos - AWS
Reino Unido
Northampton, England, United Kingdom
PythonSQLAWSTerraform
Traducción automática. Consulta el original.
Resumen del Puesto
Ingeniero de Datos AWS (PySpark)
Buscamos un Ingeniero de Datos AWS experimentado con sólida experiencia en PySpark para diseñar, desarrollar y optimizar pipelines de datos escalables y plataformas de datos basadas en la nube. El candidato ideal tendrá experiencia práctica en la creación de soluciones ETL/ELT en AWS, procesamiento de grandes conjuntos de datos utilizando Spark, e implementación de las mejores prácticas de ingeniería de datos.
Ubicación: Northampton - 3 días presenciales (modalidad híbrida)
Tipo de Empleo: Contrato
Salario: 100 - 350 GBP Por día
Habilidades Requeridas
Experiencia: 5+ años
- 5+ años de experiencia en Data Engineering.
- Sólida experiencia práctica con PySpark y Apache Spark.
- Amplia experiencia con Servicios de AWS Cloud:
- S3
- Glue
- EMR
- Redshift
- Athena
- Lambda
- IAM
- CloudWatch
- Sólidas habilidades de programación en Python.
- Habilidades avanzadas en desarrollo de SQL y optimización de consultas.
- Experiencia en la construcción de pipelines ETL/ELT a gran escala.
- Conocimiento de Data Warehousing y modelado de datos dimensional.
- Experiencia con Git y prácticas de CI/CD.
Responsabilidades Clave
- Desarrollar y mantener pipelines de datos escalables utilizando PySpark y servicios de AWS.
- Construir flujos de trabajo ETL/ELT robustos para ingerir, transformar y cargar datos de múltiples fuentes.
- Diseñar y gestionar data lakes y soluciones de data warehouse en AWS.
- Trabajar con servicios de AWS como S3, Glue, EMR, Redshift, Lambda, Athena, IAM y CloudWatch.
- Optimizar trabajos de Spark para rendimiento, escalabilidad y eficiencia de costes.
- Implementar procesos de calidad de datos, validación y monitorización.
- Colaborar con stakeholders de negocio, analistas y arquitectos para entregar soluciones de datos.
- Dar soporte a despliegues en producción, resolución de problemas y ajuste de rendimiento.
- Mantener documentación técnica y seguir los estándares de gobernanza de datos.
Habilidades Preferidas
- Experiencia con Databricks.
- Conocimiento de Apache Airflow o Step Functions de AWS.
- Experiencia con Kafka o procesamiento de datos en tiempo real.
- Exposición a Terraform e Infraestructura como Código (IaC).
- Experiencia con Snowflake o arquitecturas Lakehouse.
- Certificación de AWS es muy deseable.
Más oportunidades con un solo perfil
¿Quieres optar a más puestos sin repetir todo el proceso? Crea tu perfil para que te encuentren las empresas que usan Nort.
Crear mi perfil