Corning
Join ready
Engenheiro de Integração de Dados LT + Inglês
Sobre a oportunidade
Engenheiro de Integração de Dados LT
Na Ready, buscamos um(a) Engenheiro(a) de Integração de Dados LT com experiência em design, desenvolvimento e operação de soluções de integração de dados corporativos utilizando a Informatica Intelligent Data Management Cloud (IDMC) como plataforma principal. Você será responsável por construir, otimizar e gerenciar pipelines de dados para alimentar o Databricks Lakehouse, garantindo soluções escaláveis, eficientes e alinhadas às necessidades do negócio.
O perfil ideal possui experiência em ferramentas ETL/ELT, ambientes em nuvem (Azure, AWS e desejável GCP) e desenvolvimento assistido por inteligência artificial utilizando CLAIRE GPT e CLAIRE Copilot.
Responsabilidades
- Projetar, desenvolver e implementar pipelines de ingestão, transformação e distribuição de dados utilizando Cloud Data Integration (CDI) e Cloud Mass Ingestion (CMI).
- Construir e otimizar processos ETL/ELT para o Databricks Lakehouse utilizando IDMC for Databricks e padrões Delta Lake.
- Migrar processos desenvolvidos no PowerCenter para a Informatica IDMC utilizando metodologias estruturadas e aceleradores de migração.
- Administrar e manter a infraestrutura de integração (Secure Agents e Runtime Environments), garantindo o cumprimento dos SLAs estabelecidos.
- Implementar integrações via Cloud Application Integration (CAI) para APIs, processos de negócio e microsserviços.
- Aplicar CLAIRE GPT e CLAIRE Copilot para acelerar o desenvolvimento, depuração e documentação automática de pipelines.
- Monitorar o consumo de Informatica Processing Units (IPU) e propor melhorias em custos e desempenho.
- Colaborar com equipes multidisciplinares para garantir a disponibilidade, qualidade e escalabilidade das soluções de integração.
Conhecimentos Técnicos
Informatica IDMC
- Cloud Data Integration (CDI).
- Mapping Designer.
- SQL ELT com Pushdown Optimization.
- Taskflows.
- Mapping Partitioning.
- Dynamic Mappings.
- Parametrização.
- File Listeners.
- Intelligent Structure Models.
- Performance Tuning.
- Cloud Mass Ingestion (CMI):
- Mass Ingestion Databases (CDC).
- Arquivos.
- Aplicações.
- Streaming.
- Cloud Application Integration (CAI).
- Administração de Secure Agents e Runtime Environments.
- Migração de PowerCenter para IDMC.
Databricks
- Integração da IDMC com o Databricks Lakehouse.
- Delta Lake.
- Databricks SQL.
- Databricks Connector (Partner Connect).
- Conhecimento de Unity Catalog.
- Orquestração de processos parametrizados.
Desenvolvimento assistido por IA
- Experiência utilizando CLAIRE GPT e CLAIRE Copilot.
Cloud
- Azure
- Azure Data Factory (ADF).
- Azure Data Lake Storage Gen2.
- Azure Key Vault.
- Azure Databricks.
- AWS
- Glue.
- S3.
- Step Functions.
- Redshift.
- Athena.
- EventBridge.
Infraestrutura como Código (IaC) e CI/CD
- Terraform.
- CloudFormation.
- GitHub ou Bitbucket.
- Jenkins.
Bancos de dados
- SQL avançado (Oracle, SQL Server, PostgreSQL, Redshift e Databricks SQL).
- Conhecimento de arquiteturas Data Warehouse, Data Lake e Lakehouse.
Outros Requisitos
- Inglês B2+ ou C1 (indispensável).
- Experiência em design, desenvolvimento e operação de soluções de integração de dados utilizando Informatica IDMC.
- Experiência implementando soluções sobre Databricks.
- Experiência trabalhando em ambientes cloud (Azure, AWS e desejável GCP).
Certificações
- Informatica Cloud Data Integration Developer Professional Certification (ICP). (Requerida)
- Conhecimento de CLAIRE Agents (desejável).
- Desejável GCP
- BigQuery.
- Cloud Composer.
- Desejável experiência em MongoDB e DynamoDB.
- Informatica IDMC Foundation / Data Engineering Foundation. (Desejável)
- Informatica Cloud Application Integration Developer Professional Certification. (Desejável)
- Databricks Certified Data Engineer Associate. (Desejável)
- Microsoft Certified: Azure Data Engineer Associate (DP-203). (Desejável)
- AWS Certified Data Engineer ou Data Analytics Specialty. (Desejável)
Condições da vaga
Modalidade de contratação: Freelance (Contractor). 100% Remoto LATAM
Jornada de trabalho: Tempo integral, de segunda a sexta-feira, das 09:00 às 18:00 (Horário do Chile)
Duração do contrato: 12 meses com possibilidade de renovação.
