Lyft
iLink Digital
TPM - Ingénierie des données
SQLAWSGCP
Traduction automatique. Consultez l’original.
Chef de Projet Technique (TPM) – Plateforme Databricks
Aperçu du poste
Nous recherchons un Chef de Projet Technique (TPM) expérimenté, possédant une solide expertise en Databricks et en plateformes de données modernes, pour diriger et piloter des programmes de transformation de données et d'IA à grande échelle. Ce rôle se situera à l'intersection des activités, de l'ingénierie des données et de l'architecture de la plateforme, garantissant la livraison réussie de solutions de données de niveau entreprise sur Databricks.
Responsabilités clés
Leadership de programme
- Piloter l'exécution de bout en bout des programmes de plateforme de données construits sur Databricks (architecture Lakehouse).
- Gérer plusieurs équipes interfonctionnelles, y compris les équipes d'ingénierie des données, de science des données, DevOps et de BI.
- Être responsable de la feuille de route du programme, des délais de livraison, de la gestion des risques et de la communication avec les parties prenantes.
- Établir des cadres de gouvernance pour la livraison des programmes, le suivi de la qualité et des performances.
Propriété de la plateforme Databricks
- Diriger la conception et la mise en œuvre de plateformes de données basées sur Databricks (Azure Databricks / AWS Databricks / GCP).
- Assurer les meilleures pratiques en matière de :
- Delta Lake
- Pipelines de données (batch + streaming)
- Architecture Medallion (couches Bronze, Silver, Gold)
- Piloter l'optimisation de la plateforme, y compris les coûts, les performances et la scalabilité.
Stratégie et exécution techniques
- Collaborer avec les architectes pour définir les normes et les modèles d'architecture de données.
- Superviser le développement de :
- Pipelines ETL/ELT
- Cadres d'ingestion de données
- Couches de transformation et de curation de données
- Assurer l'intégration avec les outils de l'écosystème tels que :
- Azure Data Factory / Airflow
- Power BI / Tableau
- MLflow, Feature Store
Alignement avec les parties prenantes et les activités
- Agir comme un pont entre les responsables métier et les équipes d'ingénierie.
- Traduire les exigences métier en plans d'exécution techniques.
- Fournir des mises à jour de leadership et des rapports exécutifs sur l'avancement du programme.
Excellence de la livraison
- Définir et suivre les KPIs, les SLA et les métriques de succès du programme.
- Identifier et atténuer les risques, les dépendances et les goulots d'étranglement.
- Assurer la conformité avec les méthodologies Agile / Scrum / SAFe.
Gouvernance et sécurité des données
- Assurer la conformité avec :
- Les politiques de gouvernance des données
- Les réglementations en matière de sécurité et de confidentialité
- Mettre en œuvre les meilleures pratiques pour :
- La lignée des données
- La qualité des données
- Les contrôles d'accès
Compétences et qualifications
Compétences obligatoires
- 10+ années dans des rôles technologiques, dont 5+ années en gestion de programme.
- Solide connaissance pratique ou opérationnelle de :
- Databricks (indispensable)
- Apache Spark / PySpark / SQL
- Architecture Delta Lake
- Expérience sur les plateformes cloud :
- Expérience avérée dans la livraison de programmes de plateforme de données d'entreprise.
Expertise technique
- Concepts d'ingénierie des données :
- Modélisation des données, ETL/ELT, pipelines
- Streaming en temps réel (Kafka / Event Hub)
- CI/CD pour les pipelines de données
- Cadres DataOps / MLOps
Compétences en gestion de programme
- Solide expérience en :
- Cadres Agile / Scrum / SAFe
- Gouvernance et reporting de programme
- Excellentes compétences en gestion des parties prenantes, y compris l'engagement au niveau C.
- Azure (préféré), AWS, ou GCP
