Grupo Data

Ingénieur(e) Données Confirmé(e) – Big Data / Spark

PythonJavaSQL
Traduction automatique. Consultez l’original.

À propos de l'opportunité

Ingénieur(e) Données Confirmé(e) – Big Data / Spark

Nous recherchons un(e) Ingénieur(e) Données Confirmé(e) pour développer, maintenir et optimiser des solutions de traitement de données sur la plateforme Client Contribution. Le professionnel sera responsable de la construction de pipelines évolutifs, de la garantie de la qualité des données et de la contribution à l'évolution de l'architecture Big Data dans un environnement agile et orienté par les bonnes pratiques d'ingénierie.

Responsabilités

  1. Développer, maintenir et optimiser des solutions de traitement de données ;
  1. Concevoir et développer des processus ETL et de transformation de données ;
  1. Implémenter et maintenir des pipelines en utilisant Apache Spark ;
  1. Soutenir les initiatives d'intégration de données entre différents systèmes ;
  1. Analyser et résoudre les incidents liés aux données ;
  1. Garantir la qualité, la performance et la fiabilité des solutions de données ;
  1. Travailler en collaboration avec des équipes multidisciplinaires dans un environnement Agile.

Prérequis obligatoires

  1. Minimum de 3 ans d'expérience en Ingénierie Données et développement ;
  1. Connaissance solide de SQL, y compris :
  1. ANSI SQL ;
  1. Hive SQL ;
  1. Spark SQL ;
  1. Expérience avec Apache Spark ;
  1. Connaissance d'au moins un des langages suivants :
  1. Scala ;
  1. Python ;
  1. Java ;
  1. Expérience avec des plateformes Big Data, telles que :
  1. Azure Databricks ;
  1. Amazon EMR ;
  1. Hive ;
  1. Cloudera ;
  1. ou un autre environnement basé sur Spark ;
  1. Expérience avec Qlik Sense pour le développement de rapports et de tableaux de bord ;
  1. Expérience dans des environnements d'Intégration Continue (CI), DevOps et des méthodologies agiles ;
  1. Connaissance d'outils tels que :
  1. Git ;
  1. GitHub ;
  1. SonarQube ;
  1. Nexus ;
  1. Capacité d'analyse des exigences et travail collaboratif ;
  1. Anglais niveau B2 ou supérieur.
  1. Espagnol niveau B2 ou supérieur.

Atouts

  1. Intérêt ou expérience dans l'utilisation d'outils d'Intelligence Artificielle appliqués à l'Ingénierie Données ;
  1. Connaissance en automatisation de processus utilisant l'IA ;
  1. Intérêt à utiliser des assistants de développement pour augmenter la productivité, la qualité du code et l'efficacité des solutions analytiques.

Conditions du poste

  1. Travail 100% à distance ;
  1. La disponibilité pour un déménagement futur au Portugal ou en Espagne est obligatoire, si nécessaire pour des raisons de projet, de stratégie d'entreprise ou d'exigences légales ;
  1. Tant qu'au Brésil, le travail sera effectué entièrement à distance ;
  1. Les CV devront être présentés en anglais.

Plus d’opportunités avec un seul profil

Vous souhaitez accéder à plus de postes sans répéter tout le processus ? Créez votre profil pour être trouvé par les entreprises utilisant Nort.

Créer mon profil

Ton prochain jobest déjà à ta recherche.

Nort

Plateforme de recrutement inversé pour développeurs

Réseaux sociauxInstagramLinkedInTwitter